Component
core/ai-tool/computer-use
A tool that presents an agent with a virtual desktop it can see and control, taking screenshots and issuing pointer and keyboard input, so a deployment can automate applications that expose neither an API nor a web page. The desktop's screen geometry is set by the developer, defaulting to 1024 by 768, because the agent reasons over the pixels it is given. Declared as a server: the desktop session is a long-running workload the agent connects to. Marked mutating, since that input drives real applications. Realized on Kubernetes as a single-replica Deployment fronted by a ClusterIP Service, so one desktop stays resident across an agent's turns and every screenshot comes from the session the previous input acted on. An edge from the tool, on a socket the author names, delivers what its `inject:` block dictates, as variables or as files, on every realization that runs the tool. The catalog pins no image, so nothing renders until the Release sets `infra.image`. The component's own `inject:` block takes `env` and `file` entries too, and one reading a value of the tool alone replaces that value's default variable name.
Proveniência
- Digest do conteúdo
- sha256:82a9932e7d9a2f8df015ccf1814bfe926f694228b0130e9671b35c479612fa5a
- Publicado
- 2026-11-10T10:09:51Z
- Identidade de assinatura
- https://token.actions.githubusercontent.com/https://github.com/aggrega-ai/aggrega-hub/.github/workflows/catalog-publish-sign.yml@refs/heads/main
Assinatura
- Oficialapplication/vnd.dev.sigstore.bundle.v0.3+json
https://token.actions.githubusercontent.com/https://github.com/aggrega-ai/aggrega-hub/.github/workflows/catalog-publish-sign.yml@refs/heads/main
sha256:8a22dc63826efb86a642d370ac08613c89b9139de18a4a7c039f609c3bb99964
Referência nesta versão
oci://hub.aggrega.ai/component/core/ai-tool/computer-use:1.0.0Parâmetros do programador
Valores que o programador define no Aggregate.
Estende BaseComponents#/schemas/BaseToolParameter
| Nome | Tipo | Predefinição | Obrigatório | Descrição |
|---|---|---|---|---|
| display_width | integer | 1024 | sim | — |
| display_height | integer | 768 | sim | — |
Dimensionamento do operador
Dimensionamento da infraestrutura que o operador ajusta por ambiente.
| Nome | Tipo | Predefinição | Obrigatório | Descrição |
|---|---|---|---|---|
| image | string | — | não | Container image serving the desktop session and its control API over HTTP. |
| port | integer (min 1024, max 65535) | 8080 | não | Port the tool listens on, and the port it publishes to consumers. |
| compute | object | — | não | — |
Contrato de saída
Valores que este componente publica para os consumidores através da topologia uses.
| Nome | Tipo | Predefinição | Obrigatório | Descrição |
|---|---|---|---|---|
| host | string | — | sim | In-cluster DNS name an agent calls to see and control the desktop. A consumer that composes its own address dials this name; one that does not reads `endpoint` instead. |
| port | integer | — | sim | TCP port the control API is accepted on. It follows the port an operator set in the Release, so a consumer reads it rather than assuming a default. |
| endpoint | string | — | sim | Full base URL an agent sends screenshot and input requests to, with the host and the port already composed. A consumer hands it to its tool client as the address it calls. |
| protocol | string | — | não | URL scheme to reach `host` and `port` over, for a consumer composing its own address rather than reading `endpoint`. |
Sockets uses
Os sockets de dependência através dos quais este componente se liga. O destino de cada ligação estabelecida através de um socket tem de satisfazer o respetivo seletor de etiquetas, e cada ligação pode transportar um acoplamento nos slots que o socket declara. Cada ligação que o Aggregate ou a Release estabelece através do socket tem de preencher os slots obrigatórios.
Nenhum socket uses declarado.
Slots de acoplamento
Pontos de vinculação com nome nos quais uma Feature se acopla a este componente. O seletor de um slot restringe qual a Feature que o pode preencher, e a respetiva lista inject indica como o material da Feature pode ser entregue. Um slot obrigatório tem de estar vinculado em cada instância, por um acoplamento na instância ou num âmbito acima dela, e um slot sensível é declarado para tratar material secreto. Uma Feature também se pode acoplar com um nome que nenhum slot declara.
Nenhum slot de acoplamento declarado.
Lista de autorizações de autoinjeção
env, file
Relações
Arestas tipadas de e para outras entidades publicadas. Uma referência sem destino publicado é apresentada como uma aresta quebrada em vez de uma ligação.
Usa
- $refestende o esquema (values)
BaseComponents#/schemas/BaseToolParameter
Usado por
usa o socket «upstream»
usa o socket «forward_target»
usa o socket «scrape_target»
usa o socket «store»
aplica-se a
aplica-se a
aplica-se a
aplica-se a
aplica-se a
aplica-se a
aplica-se a
implementa