A Nvidia AVO atingiu 100% no ARC-AGI-3 em 21 de agosto, concluindo todas as tarefas de um benchmark para agentes autônomos de longo horizonte e colocando o conjunto de engenharia em torno de um modelo de fronteira no centro do resultado.

Principais conclusões

  • A Nvidia AVO atingiu 100% no ARC-AGI-3 em 21 de agosto, concluindo todas as tarefas do benchmark

  • A Nvidia AVO é um sistema de agentes que combina um modelo com software para gerenciar planejamento, memória, acesso a ferramentas e execução de tarefas

  • As equipes podem melhorar o desempenho dos agentes com uma melhor orquestração, sem alterar o modelo de fronteira subjacente

  • Agentes em produção precisam de trilhas de auditoria que mostrem quais informações orientaram cada ação, de acordo com o relato da Nvidia

A Nvidia, designer de chips que constrói software e sistemas para cargas de trabalho de IA, publicou seu relato sobre a Nvidia AVO como uma arquitetura para trabalho autônomo estendido. A empresa escreveu: “Um modelo de linguagem de fronteira é apenas um componente de um agente de IA.”

A Nvidia AVO faz o harness parte da pontuação

A Nvidia AVO não é um novo modelo de linguagem.

É um sistema de agentes que combina um modelo com software que gerencia planejamento, memória, acesso a ferramentas e execução de tarefas.

Um modelo de linguagem gera um texto provável a partir de padrões nos dados de treinamento. Um agente de IA adiciona um ciclo de controle que permite que o modelo inspecione um objetivo, tome ações, avalie resultados e escolha ações posteriores.

Esse ciclo de controle é muitas vezes chamado de “harness”.

Ele determina quais informações chegam ao modelo, quais ferramentas ele pode usar e como ele responde após uma ação malsucedida.

O harness também mantém estado. Estado é o registro em execução de instruções, ações concluídas, observações, erros e trabalho inacabado que um agente precisa durante uma tarefa de múltiplas etapas.

Portanto, a Nvidia AVO empacota a capacidade do modelo com as regras operacionais ao redor dela.

A postagem coloca essa camada de orquestração no centro do resultado do seu benchmark.

O ARC-AGI-3 testa sistemas em problemas interativos desconhecidos, em vez de prompts factuais diretos. O benchmark mede se um agente consegue agir, observar o feedback, ajustar seu plano e concluir um objetivo definido.

Um resultado perfeito é evidência estreita.

Isso estabelece desempenho sob as regras do ARC-AGI-3, mas não estabelece confiabilidade ampla em tarefas abertas do ambiente de trabalho.

Agentes de múltiplas etapas falham nas lacunas entre ações

Produtos de IA de tiro único geram uma resposta e param. Agentes de longo horizonte precisam preservar um objetivo por meio de uma sequência em que um erro inicial pode prejudicar todas as decisões seguintes.

Um agente pode ter acesso a código, bancos de dados, navegadores ou aplicações corporativas.

Cada ferramenta adicionada pode tornar um sistema mais útil, mas também cria mais um possível ponto de falha.

Um modelo pode produzir raciocínio correto, mas ainda assim escolher uma ferramenta incorreta. Ele pode repetir um comando que falhou, perder o controle de um resultado anterior ou usar informação incompleta como se fosse definitiva.

O harness existe para reduzir esses erros por meio de restrições e verificações.

Ele pode limitar permissões, armazenar etapas bem-sucedidas, forçar novas tentativas ou exigir que um agente inspecione um resultado antes de continuar.

O resultado da Nvidia AVO coloca essas escolhas na conversa do benchmark. Uma pontuação de um sistema de agentes mede mais do que o modelo subjacente, porque o software ao redor molda cada ação.

Essa distinção importa para empresas que compram sistemas autônomos para pesquisa, codificação, suporte e operações.

Um modelo útil não consegue impedir trabalho duplicado ou exposição de dados se sua camada de execução tiver controles fracos.

A comparação comercial, portanto, está mudando para uma pilha completa de agentes. Compradores devem avaliar o modelo junto com logs, permissões de acesso, comportamento de recuperação, latência, disponibilidade e pontos de aprovação humana.

De respostas por prompt a loops de tarefas controladas

Antes de agentes que usam ferramentas se tornarem uma grande categoria de produto, muitas avaliações se concentravam no comportamento do prompt e da resposta.

Um usuário enviou texto, e um modelo devolveu texto sem agir em um ambiente externo.

Sistemas de agentes mudaram esse design transformando uma resposta em uma sequência. O modelo seleciona uma ação, recebe novas informações, atualiza seu plano e continua até atender a uma regra de parada.

Avaliações anteriores muitas vezes isolavam o modelo do seu ambiente de implantação.

Essa abordagem tornou as comparações mais fáceis, mas não testou como um sistema de IA se comporta com memória, ferramentas e decisões repetidas.

O ARC-AGI-3 dá mais atenção a essa camada operacional. O benchmark exige que um agente trabalhe em tarefas interativas em que o feedback muda a próxima decisão.

Essa estrutura se parece mais com uma implantação empresarial do que com um único prompt.

Sistemas de negócios raramente fornecem instruções completas, e fluxos de trabalho automatizados precisam lidar com dados ausentes, resultados conflitantes e solicitações falhas.

A Nvidia AVO também levanta um problema de medição para o mercado amplo de IA. As equipes podem melhorar o desempenho de agentes com uma orquestração melhor, sem mudar o modelo de fronteira subjacente.

Isso não enfraquece o resultado.

Ela muda a unidade de competição de um modelo sozinho para um sistema integrado capaz de concluir tarefas em condições controladas.

A Nvidia AVO enfrenta um teste de produção mais difícil além de resultados perfeitos de benchmark

A Nvidia AVO vai enfrentar, em seguida, questões fora de um ambiente de benchmark fixo. Desenvolvedores buscarão evidências em ferramentas que mudam, prompts incompletos, entradas adversariais e períodos de operação mais longos.

Agentes em produção precisam de trilhas de auditoria que mostrem quais informações orientaram uma ação.

Os operadores precisam conseguir identificar se uma falha começou com o modelo, seus dados, uma ferramenta ou o harness.

Essa exigência é prática, não acadêmica. Uma empresa não pode atribuir com segurança a um agente uma autoridade significativa se não conseguir reconstruir o caminho que levou a uma ação incorreta.

O resultado do ARC-AGI-3 oferece um marco de benchmark forte para a Nvidia AVO.

O próximo teste é se a mesma disciplina de controle se mantém quando as tarefas envolvem sistemas reais, erros custosos e responsabilização humana.