AAI News Hub
PesquisaThu, August 13, 2026·4d ago2 sources corroborating

Artigo defende que a segurança de agentes precisa de contratos em tempo de execução

O artigo no arXiv afirma que o alinhamento durante o treinamento é insuficiente para agentes autônomos.

Por que importa

O artigo reformula a segurança de agentes como um problema operacional de sistemas para ferramentas capazes de executar código, alterar arquivos, enviar mensagens e modificar bancos de dados. Se adotada, a abordagem levaria desenvolvedores de agentes a priorizar a aplicação de regras no nível do harness e a coleta de evidências, não apenas o alinhamento no nível do modelo.

Pontos-chave

  • 1.O contrato de segurança deve ficar no harness do agente.
  • 2.Os controles incluem sandboxes, barreiras de permissão e monitores de trajetória.
  • 3.As verificações de evidência incluem testes, logs, diffs e fundamentação em citações.

Um novo artigo no arXiv argumenta que a segurança de agentes de IA deve ser imposta como um contrato em tempo de execução pelo harness do agente, em vez de ser tratada principalmente como uma propriedade aprendida durante o treinamento do modelo. Os autores propõem controles preventivos como sandboxes, barreiras de permissão, filtros de saída e monitores de trajetória, além de exigências de evidência como execuções de teste, capturas de logs, diffs de arquivos e fundamentação em citações antes do envio da tarefa. A posição se baseia em auditorias que cobrem 52 incidentes documentados de segurança envolvendo agentes de IA e LLMs, 31 casos não contestados de falsa conclusão, 12 sistemas e harnesses públicos de agentes, e 28.560 artigos aceitos na NeurIPS, ICML e ICLR entre 2023 e 2025.

Experimente hoje

Audite o harness do seu agente quanto a barreiras de permissão, sandboxing e verificações de evidência antes de permitir a conclusão de tarefas.

Fontes e reportagens originais

Este resumo sintetiza e linka a cobertura dos veículos abaixo.

Gostou deste resumo? Receba o próximo no seu e-mail.

Mais em Pesquisa