Component
core/ai-tool/computer-use
A tool that presents an agent with a virtual desktop it can see and control, taking screenshots and issuing pointer and keyboard input, so a deployment can automate applications that expose neither an API nor a web page. The desktop's screen geometry is set by the developer, defaulting to 1024 by 768, because the agent reasons over the pixels it is given. Declared as a server: the desktop session is a long-running workload the agent connects to. Marked mutating, since that input drives real applications. Realized on Kubernetes as a single-replica Deployment fronted by a ClusterIP Service, so one desktop stays resident across an agent's turns and every screenshot comes from the session the previous input acted on. An edge from the tool, on a socket the author names, delivers what its `inject:` block dictates, as variables or as files, on every realization that runs the tool. The catalog pins no image, so nothing renders until the Release sets `infra.image`. The component's own `inject:` block takes `env` and `file` entries too, and one reading a value of the tool alone replaces that value's default variable name.
Procedência
- Digest do conteúdo
- sha256:82a9932e7d9a2f8df015ccf1814bfe926f694228b0130e9671b35c479612fa5a
- Publicado
- 2026-11-10T10:09:51Z
- Identidade de assinatura
- https://token.actions.githubusercontent.com/https://github.com/aggrega-ai/aggrega-hub/.github/workflows/catalog-publish-sign.yml@refs/heads/main
Assinatura
- Oficialapplication/vnd.dev.sigstore.bundle.v0.3+json
https://token.actions.githubusercontent.com/https://github.com/aggrega-ai/aggrega-hub/.github/workflows/catalog-publish-sign.yml@refs/heads/main
sha256:8a22dc63826efb86a642d370ac08613c89b9139de18a4a7c039f609c3bb99964
Referência nesta versão
oci://hub.aggrega.ai/component/core/ai-tool/computer-use:1.0.0Parâmetros do desenvolvedor
Valores que o desenvolvedor define no Aggregate.
Estende BaseComponents#/schemas/BaseToolParameter
| Nome | Tipo | Padrão | Obrigatório | Descrição |
|---|---|---|---|---|
| display_width | integer | 1024 | sim | — |
| display_height | integer | 768 | sim | — |
Dimensionamento do operador
Dimensionamento de infraestrutura que o operador ajusta por ambiente.
| Nome | Tipo | Padrão | Obrigatório | Descrição |
|---|---|---|---|---|
| image | string | — | não | Container image serving the desktop session and its control API over HTTP. |
| port | integer (min 1024, max 65535) | 8080 | não | Port the tool listens on, and the port it publishes to consumers. |
| compute | object | — | não | — |
Contrato de saída
Valores que este componente publica para os consumidores pela topologia uses.
| Nome | Tipo | Padrão | Obrigatório | Descrição |
|---|---|---|---|---|
| host | string | — | sim | In-cluster DNS name an agent calls to see and control the desktop. A consumer that composes its own address dials this name; one that does not reads `endpoint` instead. |
| port | integer | — | sim | TCP port the control API is accepted on. It follows the port an operator set in the Release, so a consumer reads it rather than assuming a default. |
| endpoint | string | — | sim | Full base URL an agent sends screenshot and input requests to, with the host and the port already composed. A consumer hands it to its tool client as the address it calls. |
| protocol | string | — | não | URL scheme to reach `host` and `port` over, for a consumer composing its own address rather than reading `endpoint`. |
Sockets uses
Os sockets de dependência pelos quais este componente se conecta. O destino de cada conexão ligada por um socket deve satisfazer o seletor de rótulos dele, e cada conexão pode carregar um acoplamento nos slots que o socket declara. Cada conexão que o Aggregate ou a Release liga pelo socket deve preencher os slots obrigatórios.
Nenhum socket uses declarado.
Slots de acoplamento
Pontos de vinculação nomeados nos quais uma Feature se acopla a este componente. O seletor de um slot restringe qual Feature pode preenchê-lo, e sua lista inject indica como o material da Feature pode ser entregue. Um slot obrigatório deve estar vinculado em cada instância, por um acoplamento na instância ou em um escopo acima dela, e um slot sensível é declarado para lidar com material secreto. Uma Feature também pode se acoplar com um nome que nenhum slot declara.
Nenhum slot de acoplamento declarado.
Lista de permissões de autoinjeção
env, file
Relações
Arestas tipadas de e para outras entidades publicadas. Uma referência sem destino publicado é exibida como uma aresta quebrada em vez de um link.
Usa
- $refestende o esquema (values)
BaseComponents#/schemas/BaseToolParameter
Usado por
usa o socket «upstream»
usa o socket «forward_target»
usa o socket «scrape_target»
usa o socket «store»
aplica-se a
aplica-se a
aplica-se a
aplica-se a
aplica-se a
aplica-se a
aplica-se a
implementa