Trang này được dịch bằng máy. Đọc bản gốc tiếng Anh.

Recipe

vllm-kubeai

vLLM realized as a KubeAI Model the KubeAI operator reconciles, rather than a directly synthesized StatefulSet — a second controller-driven realization of the same model component, selectable in the Manifest alongside the synthesis recipe and the KServe realization. The recipe emits a Model custom resource whose url is the model pointer; the operator serves it behind its OpenAI-compatible proxy and autoscales it. The model value is a deterministic pointer the operator resolves at reconcile time; the compiler never fetches weights. GPU and CPU sizing carry through resourceProfile. provides is filled from the operator's proxy, which addresses a model by its resource name, so a consumer wires to it exactly as it would to the synthesized realization. An attached api_key reaches the server through the Model's envFrom, which imports the credential's secret by name and names each variable after one of its data keys, so the credential publishes its key as VLLM_API_KEY, and the build halts naming the key when it does not. The KubeAI control plane is a runtime prerequisite: the build halts unless the operator affirms it is installed (infra.control_plane_present), so no custom resource is emitted into a cluster that cannot reconcile it. The Model is written into the namespace the Release, or else the Aggregate, names for this component through the aggrega.ai/namespace annotation, where one is set, and the operator creates the model's pods there; the metrics keys publish the pod label, port name and path a scraper discovers those pods by.

Nguồn gốc

Chính thứcĐược ký bởi một danh tính ký mà danh mục này công nhận là nhà phát hành chính thức.
Digest nội dung
sha256:87547c9db1672236495dcfc92d462ffef874c08d1e106e33fb90e571e4af47dd
Đã xuất bản
2026-11-10T10:28:00Z
Danh tính ký
https://token.actions.githubusercontent.com/https://github.com/aggrega-ai/aggrega-hub/.github/workflows/catalog-publish-sign.yml@refs/heads/main

Chữ ký

  • Chính thứcapplication/vnd.dev.sigstore.bundle.v0.3+json

    https://token.actions.githubusercontent.com/https://github.com/aggrega-ai/aggrega-hub/.github/workflows/catalog-publish-sign.yml@refs/heads/main

    sha256:7be843fe44c8081ec54eafe898757702098034be7c6955fdf1910671a01e3fde

Tham chiếu ở phiên bản này

oci://hub.aggrega.ai/recipe/helm/vllm-kubeai:1.0.0
Đích
—
Triển khai
core/ai-model/vllm:1.0.0

Cung cấp

Các mẫu con trỏ xác định mà công thức này nối cho bên tiêu thụ.

TênMẫu
hostkubeai
port80
endpointhttp://kubeai/openai/v1
model{{ .context.instance_id }}
protocolhttp
metrics_endpoint
metrics_service
metrics_service_port
metrics_pod_selectorkubeai.org/model={{ .context.instance_id }}
metrics_pod_porthttp
metrics_path/metrics

Workload

Chưa khai báo mẫu khối lượng công việc nào.

Giá trị cục bộ

Chưa khai báo giá trị cục bộ nào.

Ánh xạ values

Chưa khai báo ánh xạ values nào.

Quan hệ

Các cạnh có kiểu đi tới và đi từ các thực thể đã xuất bản khác. Một tham chiếu không có đích đã xuất bản được hiển thị là một cạnh bị đứt thay vì một liên kết.

Sử dụng

  • triển khaitriển khaihợp đồng tương thích

    core/ai-model/vllm:1.0.0

    Tất cả đầu ra bắt buộc đều được đáp ứng và mọi đầu ra được cung cấp đều được nêu tên trong hợp đồng.

Được sử dụng bởi

Không có gì trong danh mục phụ thuộc vào thực thể này.

Tài liệu tham khảo khái niệm Recipe →

Danh mục Aggrega — chỉ mục mở gồm các thành phần, tính năng, công thức và các plugin kết xuất chúng.

Được xây dựng bằng hệ thống thiết kế dùng chung của Aggrega.

Quyền riêng tư