Bỏ qua để đến nội dung
AggregaAggrega
Chọn ngôn ngữ: Tiếng Việt
Trang này được dịch bằng máy. Đọc bản gốc tiếng Anh.

Vòng đời Day-2

Vòng đời Day-2 và thực thi theo thời gian

Một trình biên dịch trước (Ahead-of-Time, AOT) không phụ thuộc vào năng lực vốn dĩ tạo ra khoảng cách giữa ý định khai báo (Day-1) và thực tế vận hành (Day-2). Đám mây không hoàn toàn tất định, việc triển khai đòi hỏi sắp xếp theo thời gian, và nhà phát triển cần các trình kích hoạt mệnh lệnh cho các tác vụ bảo trì.

Aggrega thu hẹp các khoảng cách này một cách có cấu trúc thông qua các polyfill kiến trúc cụ thể và định tuyến gốc GitOps, để các cấu hình được tạo ra đáp ứng những nhu cầu vận hành này mà không làm tổn hại sự thuần khiết của trình biên dịch lõi.

1. Mô hình thực thi DAG (sắp xếp theo thời gian)

Vấn đề: Triển khai hạ tầng là một đồ thị có hướng không chu trình (DAG) của thời gian. Một task di chuyển cơ sở dữ liệu phải chạy xong trước khi server web khởi động. Tuy nhiên, trình biên dịch AOT tạo ra các thư mục phẳng chứa YAML tĩnh hoặc Terraform. Nếu bạn đưa các thư mục phẳng này cho một bộ điều khiển GitOps (như ArgoCD), nó sẽ áp dụng mọi thứ cùng lúc, khiến web server rơi vào vòng lặp sự cố trong khi chờ cơ sở dữ liệu.

Giải pháp: syncWave theo từng ranh giới trong Release Aggregate của nhà phát triển được giữ nguyên. Vì việc sắp xếp là một thực tế vận hành vật lý, nó được quản lý nghiêm ngặt trong Miền 4 (Release). Mỗi ranh giới trong Release mang một trường tùy chọn syncWave: <integer>, cho phép người vận hành nền tảng sắp xếp thứ tự triển khai dần một cách tường minh ở cấp ranh giới.

apiVersion: aggrega.ai/v1beta1
kind: Release
metadata:
name: sequenced-release
version: 1.0.0
environment: production
spec:
aggregate: my-app
manifest: prod-manifest
boundaries:
infra:
syncWave: 0
components:
core-vpc: {}
postgres-db: {}
migrations:
syncWave: 1
components:
db-migration-task: {}
apps:
syncWave: 2
components:
web-server: {}
support-agent: {}

Ngữ nghĩa giá trị đợt:

  • Đợt là một số nguyên có dấu; giá trị mặc định là 0. Các giá trị âm chạy trước mọi thứ khác (CRD, namespace, RBAC); các giá trị lớn hơn chạy sau các giá trị nhỏ hơn. Người vận hành đặt giá trị phù hợp với cấu trúc triển khai của họ.
  • Mỗi phiên bản thành phần nằm trực tiếp trong một ranh giới sẽ kế thừa giá trị đợt của ranh giới vào nút IR của nó. Không có cơ chế ghi đè theo từng thành phần ở lớp soạn thảo — thứ tự theo từng tài nguyên nội bộ của provider bên trong một ranh giới là việc của provider.
  • Các ranh giới lồng nhau không kế thừa ngầm. Một ranh giới lồng nhau không khai báo syncWave sẽ mặc định là 0 bất kể khai báo của ranh giới bên ngoài. Người vận hành muốn “toàn bộ outer là đợt 1, bao gồm cả ranh giới con inner của nó” sẽ khai báo syncWave: 1 trên cả hai.

Tác động của trình biên dịch: Trình biên dịch lan truyền giá trị wave của mỗi boundary tới các manifest đã render trong boundary đó. Các Providers phát ra các nguyên hàm sắp thứ tự gốc:

  • Đối với Kubernetes (ArgoCD/Flux): provider helm phát ra argocd.argoproj.io/sync-wave: "<N>" dưới dạng một mục metadata.annotations trên mọi manifest được kết xuất, và một tài nguyên mà chart đánh dấu là hook của Helm còn nhận thêm helm.sh/hook-weight: "<N>" cho thứ tự hook gốc của Helm. Provider helm-chart chỉ phát ra chú thích này trên các tệp template mà một Recipe thêm vào chart thông qua artifacts:; nó sao chép nguyên vẹn các template của chính chart, nên những template đó không mang wave.
  • Đối với Compose: provider compose biểu đạt thứ tự dưới dạng depends_on giữa các dịch vụ của tệp mà một ranh giới được kết xuất vào, phụ thuộc vào tình trạng sức khỏe của đích khi đích khai báo healthcheck và vào việc khởi động của nó khi không khai báo. depends_on chỉ định một dịch vụ bên trong một tệp, nên không thể biểu đạt thứ tự giữa hai tệp compose; người vận hành sắp xếp các dự án compose riêng biệt ở lớp gọi docker compose up.
  • Đối với CloudFormation: provider cloudformation biểu đạt thứ tự dưới dạng DependsOn giữa các tài nguyên của mẫu stack mà một nhóm điều phối được lắp ráp vào, mỗi tài nguyên chỉ định các tài nguyên của đợt có dữ liệu ngay trước đó và đích nối chuỗi phần còn lại. Thuộc tính này chi phối cả thứ tự xóa theo chiều ngược lại lẫn thứ tự tạo; nó không biểu đạt điều kiện sẵn sàng nào, vì một mẫu không có khái niệm tài nguyên đã sẵn sàng phục vụ. DependsOn chỉ định một tài nguyên bên trong một mẫu, nên không thể biểu đạt thứ tự giữa hai stack; người vận hành sắp xếp các stack riêng biệt ở lớp triển khai.
  • Đối với Terraform: provider terraform biểu đạt thứ tự dưới dạng depends_on giữa các khối module của cấu hình gốc mà một ranh giới được lắp ráp vào, mỗi module nêu tên các module của wave có nội dung ngay trước đó và Terraform nối chuỗi phần còn lại. Nó sắp thứ tự các hành động mà Terraform thực hiện và không biểu đạt điều kiện sẵn sàng nào, vì một cấu hình không có khái niệm tài nguyên đã có thể phục vụ. depends_on nêu tên một module trong một cấu hình, nên không thể biểu đạt thứ tự giữa hai cấu hình gốc; việc sắp thứ tự chúng là việc của người vận hành.

Khóa nội bộ của Aggrega aggrega.ai/sync-wave: "<N>" được cung cấp cùng với chú thích ArgoCD cho mục đích quan sát và truy xuất nguồn gốc — dưới dạng chú thích trên đầu ra helm và trên các tệp template mà một Recipe thêm vào một chart helm-chart, dưới dạng nhãn service trên compose, dưới dạng một dòng của chú giải nguồn gốc trong mỗi module terraform, và dưới Metadata."aggrega.ai/provenance" của mỗi tài nguyên cloudformation — trong khi chú thích ArgoCD mới là thứ mà các bộ điều khiển GitOps tiêu thụ.

Đơn vị soạn thảo đợt và đơn vị có thể triển khai

Ranh giới là đơn vị soạn thảo đợt. Đơn vị có thể triển khai là đường dẫn lắp ráp — đầu ra trên đĩa do trình biên dịch tạo ra mà một pipeline CI/CD điều phối dựa trên đó. Theo mặc định, một ranh giới ánh xạ tới một đường dẫn lắp ráp: các thành phần của mỗi ranh giới được phát ra dưới boundaries/<boundary-name>/<provider>/, và helm install / docker compose up chạy trên đường dẫn đó.

Người vận hành có thể gộp ánh xạ 1:1 này lại. Các ranh giới có thể khai báo các trường mẫu đường dẫn directory: (và subDirectory:) mà khi được dùng chung giữa các ranh giới sẽ định tuyến các thành phần của những ranh giới đó vào một đầu ra lắp ráp duy nhất tại đường dẫn dùng chung. Hai ranh giới khai báo directory: "deploy/cluster" tạo ra một đầu ra lắp ráp chứa các thành phần của cả hai — đơn vị có thể triển khai trở thành đường dẫn lắp ráp, không phải danh tính của ranh giới.

Các manifest có đợt hỗn hợp trong cùng một đầu ra lắp ráp là bình thường và được hỗ trợ. Khi ranh giới A khai báo syncWave: 1 và ranh giới B khai báo syncWave: 2, và cả hai dùng chung directory: "deploy/cluster", đơn vị có thể triển khai thu được chứa các thành phần của cả hai ranh giới; mỗi manifest mang chú thích đợt của ranh giới gốc của nó. Công cụ runtime đọc chú thích theo từng tài nguyên và sắp xếp bên trong đơn vị triển khai đã lắp ráp — ngữ cảnh đồng bộ theo từng Application của ArgoCD xử lý các manifest của đợt 1, chờ chúng ở trạng thái Healthy, rồi xử lý đợt 2; thứ tự hook của Helm đọc helm.sh/hook-weight theo từng tài nguyên hook. Đây là mẫu chuẩn của ArgoCD: việc phát ra theo từng tài nguyên chính là đầu vào mà các bên tiêu thụ liên công cụ mong đợi.

Việc sắp xếp giữa các Application (khi người vận hành chạy nhiều Application ArgoCD trên các đầu ra lắp ráp riêng biệt) là cấu hình CI ở cấp người vận hành — Aggrega tạo ra các artifact; người vận hành kết nối các Application ArgoCD của họ quanh các artifact đó thông qua app-of-apps hoặc Progressive Sync. Mẫu chú thích theo từng tài nguyên của Aggrega là dạng đầu vào chuẩn mà mọi bên tiêu thụ liên công cụ mong đợi.

2. Polyfill định địa chỉ động

Vấn đề: Đám mây không tất định tại thời điểm tạo. Các tài nguyên như phiên bản AWS RDS hoặc bucket S3 tạo ra hash URL ngẫu nhiên chỉ sau khi chúng được cấp phát vật lý. Vì trình biên dịch AOT tạo cấu hình trước khi đám mây cấp phát bất cứ thứ gì, trình biên dịch về mặt vật lý không thể chèn URL cơ sở dữ liệu dạng nguyên văn vào biến môi trường của một container.

Giải pháp: Con trỏ tất định thông qua các Features thông tin xác thực Aggrega giải quyết điều này bằng cách tận dụng các Features thông tin xác thực sẵn có, chuyển định nghĩa “tất định” từ một địa chỉ IP nguyên văn sang một con trỏ tất định. Cấu hình được tạo ra không truyền URL; nó truyền đường dẫn tới một Cloud Vault nơi URL sẽ tồn tại.

  • Ví dụ 1: Tạo đầu ra (Terraform RDS) Recipe Ops cho cơ sở dữ liệu tạo phiên bản AWS RDS. Điều then chốt là Recipe được viết để xuất trực tiếp URL động vừa được tạo đó vào AWS Systems Manager (SSM) Parameter Store tại một đường dẫn được đặt tên tất định (ví dụ: /aggrega/prod/db-url).
  • Ví dụ 2: Tiêm đầu vào (ứng dụng Kubernetes) Nhà phát triển gắn Feature thông tin xác thực core/referenced-secret vào worker, trong một slot mà Component của nó khai báo, với origin được đặt thành chuỗi con trỏ tất định ("/aggrega/prod/db-url"). Trên một đích Kubernetes, Manifest liên kết phần gắn đó với helm/k8s-external-secret, thứ kết xuất một Kubernetes ExternalSecret yêu cầu operator kho bí mật của cụm lấy mục đó vào một Secret, và công bố tên cùng khóa dữ liệu của Secret; Recipe của worker đọc chúng qua attachments: của container và kết xuất một biến môi trường Pod được ánh xạ tới valueFrom: secretKeyRef (xem Cách một thông tin xác thực đến được container). Trình biên dịch chuyển tiếp chuỗi con trỏ và không bao giờ đọc URL.

Khi chạy, Terraform cấp phát DB và lưu URL vào vault. Container khởi động, đọc Secret được đối chiếu từ vault và kết nối. Trình biên dịch AOT đã tạo ra các quan hệ thông qua các chuỗi con trỏ ổn định mà không bao giờ cần đến địa chỉ IP nguyên văn.

3. Hành động mệnh lệnh (bàn giao có thể thực thi)

Vấn đề: Trạng thái khai báo rất phù hợp cho việc cấp phát Day-1, nhưng nhà phát triển cần chạy các hành động mệnh lệnh: “Sao lưu DB ngay bây giờ.” Một pipeline GitOps thuần khai báo không có cơ chế gốc nào để kích hoạt lại một script tĩnh.

Giải pháp: Task ngủ và lệnh riêng của nền tảng đích Aggrega giải quyết vấn đề này trong khi vẫn giữ sự thuần khiết AOT nghiêm ngặt. Nó sinh cấu hình cho một task được triển khai mà không khởi động, và mỗi lần chạy được khởi động trên nền tảng đích bằng chính lệnh của nền tảng đó.

  1. Ý định của nhà phát triển: Nhà phát triển khai báo script dưới dạng một task trong Aggregate và gắn một Feature yêu cầu chạy nó theo yêu cầu (ví dụ: core/manual-trigger). Việc được chạy theo yêu cầu là một phần bản chất của tác vụ, nên nhà phát triển gắn nó; còn một Feature mà mọi đầu vào đều mang tính vận hành thì do bộ phận vận hành gắn, trong Release.
  2. Hình dạng ngủ: Recipe riêng của task trên mỗi nền tảng đích đọc phần gắn kèm và kết xuất task ở dạng được triển khai mà không khởi động lần chạy nào. Trên Kubernetes, task là một CronJob bị giữ bằng suspend: true, với lịch chỉ định một ngày không bao giờ đến, thay cho Job vốn sẽ chạy ngay khi được triển khai. Trên Docker Compose, service của task, thứ mà Compose không khởi động lại sau khi nó thoát, mang profile manual, nên docker compose up để nó ở trạng thái dừng. Trên Amazon ECS, qua Terraform hoặc CloudFormation, định nghĩa task được triển khai riêng, không có lịch nào để khởi động nó. FeatureRecipe mà Manifest liên kết cho phần gắn kèm không thêm tệp riêng nào trên bất kỳ nền tảng đích nào: thay đổi nằm trong đầu ra của chính task.
  3. Bàn giao: Trình biên dịch không truy cập cụm nào và không gọi API đám mây nào, và bản build không khởi động lần chạy nào cũng không ghi script nào. Mỗi lần chạy được người vận hành khởi động bằng lệnh riêng của nền tảng đích: kubectl create job <run-name> --from=cronjob/<cronjob> trên Kubernetes, docker compose run --rm <service> trên Docker Compose, và aws ecs run-task trên Amazon ECS, kèm cụm, định nghĩa task và cấu hình mạng mà Release đặt dưới infra.overrides của task. Việc sinh cấu hình và việc thực thi lúc chạy được giữ tách biệt.

(Lưu ý: Trên Kubernetes và Amazon ECS, một task mang lịch sẽ chạy theo lịch đó dù có phần gắn kèm hay không, và cùng lệnh đó khởi động thêm một lần chạy giữa các lần đã lên lịch; trên Docker Compose, vốn không có bộ lập lịch, Recipe của task từ chối lịch. Ví dụ hoàn chỉnh task-run-on-demand build một Aggregate cho Kubernetes, Docker Compose, Terraform và CloudFormation, và cho thấy trên mỗi nền tảng đầu ra được kết xuất cùng lệnh khởi động một lần chạy.)

4. Phân tích trước: Hook của workspace (RBAC và hạn ngạch nền tảng)

Vấn đề: Một số thay đổi cấp phát hạ tầng đắt đỏ hoặc quan trọng với môi trường production — chẳng hạn một cluster GPU lớn — và không được đi vào pipeline GitOps khi chưa được xem xét. Người đóng góp nào được phép đưa thay đổi nào lên môi trường nào là một quyết định chính sách của tổ chức; trình biên dịch không được mã hóa cứng điều đó.

Giải pháp: Một trình biên dịch AOT thuần túy không thể truy vấn Active Directory hay lấy thông tin xác thực đám mây để biết ai đang chạy bản build. Để ngăn việc tạo trái phép ngay cả trước khi CI/CD chạy, kiến trúc dựa vào việc chèn ngữ cảnh một cách tường minh.

Khi aggrega build được một runner CI/CD gọi, pipeline ghi ngữ cảnh thực thi vào một tệp cấu hình mà nó truyền bằng --config, dưới dạng with.settings của phần gắn quản trị đánh giá nó (ví dụ: approval: standard). Tệp liệt kê các phần gắn của nó dưới governance_append, nên chúng được thêm vào các plugin quản trị mà cấu hình riêng của workspace gắn, thay vì bị chúng thay thế. Một chính sách ở vai trò ir-verdict đọc các thiết lập đó dưới dạng input.settings. Nó nhận đồ thị đã lắp ráp chứ không phải Release, nên môi trường của Release đến với nó dưới dạng một nhãn: một chính sách ở vai trò label-transform đọc input.compilation_context.environment và gắn nhãn đó cho từng nút. Phán quyết so sánh hai thứ và dừng bản dựng khi chúng không khớp — ở đây là một bản dựng production mà thiết lập không mang approval: platform-approved:

# ci-governance.yaml — written by the CI/CD runner, passed as `aggrega build --config ci-governance.yaml`
plugins:
governance_append:
- uri: governance/rego:<version>
role: label-transform
with:
sources:
- policies/environment.rego
- uri: governance/rego:<version>
role: ir-verdict
with:
sources:
- policies/approval.rego
settings:
approval: standard
# policies/environment.rego — evaluated by the governance label-transform role, during topology construction
package acme.context
import rego.v1
labels contains {"node": id, "key": "acme.com/environment", "value": input.compilation_context.environment} if {
some id, _ in input.graph.nodes
}
# policies/approval.rego — evaluated by the governance ir-verdict role over the assembled graph
package acme.approval
import rego.v1
approved if input.settings.approval == "platform-approved"
deny contains msg if {
not approved
some node in input.graph.spec.nodes
node.labels["acme.com/environment"] == "production"
msg := "a production build needs the approval platform-approved in the pipeline's governance settings."
}

Một lần chạy mà thiết lập hoàn toàn không mang phê duyệt nào cũng bị từ chối, vì quy tắc hỏi liệu phê duyệt đó có hiện diện hay không chứ không hỏi liệu một phê duyệt khác có hiện diện hay không. Điều này cô lập RBAC khỏi logic gốc của trình biên dịch, bảo đảm trình biên dịch chỉ hoạt động như một bộ đánh giá tất định đối với dữ liệu được cung cấp.

5. FinOps shift-left (ước tính chi phí thông qua chính sách)

Vấn đề: Các cấu hình sai do vô tình (ví dụ: yêu cầu workers: 500) có thể vượt qua các biện pháp bảo vệ tài chính và gây ra tình trạng vượt chi phí đám mây lớn.

Giải pháp (chính sách Wasm của doanh nghiệp): Vì Đồ thị IR chứa toàn bộ cấu trúc liên kết và Release chứa ánh xạ vật lý (.infra), doanh nghiệp có thể đánh giá chính xác chi phí của những gì một Release triển khai trước khi tạo mà không cần một tính năng trình biên dịch được mã hóa cứng. Doanh nghiệp chỉ cần viết một plugin WebAssembly FinOps tùy chỉnh và gắn nó vào socket quản trị ở một vai trò phán quyết. Plugin tùy chỉnh này có thể đọc các payload .infra, tính toán chi phí hàng tháng ước tính và dừng bản dựng nếu chi phí tính được vượt quá giới hạn ngân sách do doanh nghiệp tự định nghĩa nội bộ.

6. Vòng đời nhập “brownfield”

Vấn đề: Doanh nghiệp đã có phần lớn hạ tầng đang chạy. Dù Aggrega được thiết kế để kết nối một bản dựng tới hạ tầng không được quản lý thông qua một khối lượng công việc tham chiếu (mạng pass-through; xem khối lượng công việc tham chiếu), việc đưa một cơ sở dữ liệu Oracle hiện có vào trạng thái Terraform do Aggrega tạo ra thường khiến các bộ điều phối cố gắng tạo lại cơ sở dữ liệu, phá hủy dữ liệu hiện có.

Giải pháp (dự kiến): Một Feature core/resource-adoption được lên kế hoạch để quản lý vòng đời nhập.

Khi nhà phát triển mô hình hóa cơ sở dữ liệu hiện có trong Aggregate của mình và gắn tính năng resource-adoption trong một pipeline được thực thi tuần tự, plugin kết xuất Wasm được thiết kế để đánh giá payload Ops cơ sở của Recipe. Thay vì phát ra các cấu hình tạo chuẩn, plugin được thiết kế để xuất cú pháp tiếp nhận tường minh của nền tảng đích (ví dụ: trả về một JSONPatch với các khối Terraform import {} hoặc các chính sách quản lý Crossplane ObserveOnly). Điều này cho phép doanh nghiệp tạo cấu hình một cách an toàn để đưa kiến trúc cũ vào mặt phẳng điều khiển GitOps mà không gây gián đoạn.

7. Thực hành tốt nhất cho Ops và đặt tên tất định

Trong khi trình biên dịch lõi dựa vào các ID nút nội bộ ổn định (ví dụ: support-db) trong Đồ thị IR phẳng, các nhà cung cấp đám mây vật lý (như AWS, Azure và GCP) thường yêu cầu các chuỗi duy nhất toàn cục cho hạ tầng vật lý (ví dụ: tên bucket S3, tên IAM Role hoặc tên miền API Gateway).

Nếu một kỹ sư Platform Ops mã hóa cứng một tên vật lý trong mẫu cơ sở của mình (ví dụ: bucket_name: "enterprise-data-bucket"), các artifact được tạo ra sẽ được áp dụng trơn tru ở lần đầu. Tuy nhiên, nếu một nhà phát triển triển khai môi trường thứ hai (ví dụ: staging so với prod), nhà cung cấp đám mây sẽ từ chối các tài nguyên của môi trường thứ hai lúc chạy do xung đột tên.

Quy tắc đầu ra tất định (an toàn GitOps): Vì các bộ điều khiển GitOps (ArgoCD, Flux) phát hiện khác biệt ở cấp byte trên các artifact đã kết xuất, trình biên dịch bảo đảm rằng các đầu vào giống hệt nhau tạo ra đầu ra giống hệt nhau đến từng byte. Các map đi qua ngữ cảnh mẫu (.context.inject.env, .values, .infra và phần còn lại của khung nhìn runtime) được hỗ trợ bởi cấu trúc map có thứ tự, giữ nguyên thứ tự chèn của tác giả trên toàn bộ lớp dữ liệu, và ranh giới mẫu là ngoại lệ duy nhất: {{ range }} trên các map đó lặp theo thứ tự bảng chữ cái của khóa, như các mẫu Go vẫn làm, chứ không theo thứ tự của tác giả. Kỹ sư Ops có thể tin cậy rằng thứ tự lặp đó là tất định giữa các lần chạy với cùng đầu vào; khi trình tự mang ý nghĩa, nó được viết dưới dạng danh sách thay vì được khôi phục từ một map. Tuy nhiên, hàm Sprig keys trả về thứ tự lặp của map Go (vốn không tất định theo thiết kế ngôn ngữ); các mẫu tạo chuỗi khóa tất định từ đầu ra của keys phải chuyển nó qua sortAlpha (ví dụ: {{ keys .values | sortAlpha }}) để khôi phục tính tất định.

Quy tắc vàng cho các Recipes Ops (mẫu Helm): Kỹ sư Platform Ops không bao giờ được mã hóa cứng tên tài nguyên đám mây vật lý. Thay vào đó, họ phải xây dựng các tên duy nhất một cách tất định bằng cách ghép nối ngữ cảnh triển khai của Aggrega trong giai đoạn đánh giá mẫu. Đây là một quy tắc về khả năng tái sử dụng và an toàn trước xung đột, không phải quy tắc tất định — tên mã hóa cứng tạo ra đầu ra ổn định nhưng xung đột nghiêm trọng khi cùng một Recipe kết xuất nhiều phiên bản thành phần hoặc khi cùng một Aggregate được triển khai trên nhiều Releases.

Trình biên dịch cung cấp đúng hai biến để bảo đảm tính duy nhất toàn cục:

  1. {{ .metadata.release_name }}: Tên của Release điều khiển việc triển khai (ví dụ: prod-billing).
  2. {{ .context.instance_id }}: ID Component cụ thể từ Aggregate của nhà phát triển (ví dụ: receipt-storage).

Bằng cách ghép nối chúng (ví dụ: {{ .metadata.release_name }}-{{ .context.instance_id }}), nhóm Ops bảo đảm rằng các cấu hình do plugin Wasm tạo ra sử dụng tên tài nguyên duy nhất theo từng môi trường, theo từng thành phần, mà không đòi hỏi nhà phát triển phải quản lý các quy ước đặt tên vật lý.