InicioBlogNewsletterOpenAI detalha como detecta agentes desalinhados
Capa oficial da OpenAI para o artigo sobre detecção de desalinhamento, em gradiente amarelo e laranja.
Imagen: OpenAI
Newsletter5 minConfirmado oficial

OpenAI detalha como detecta agentes desalinhados

OpenAI descreve quatro camadas para detectar desalinhamento e os limites de cobertura, revisão humana e resposta automatizada.

Marcelo Santiago

Marcelo Santiago

Criador do bridgecode

OpenAI detalha como detecta agentes desalinhados

La mayor newsletter de IA del Mundo

Recibe artículos sobre IA en tu correo

Selección técnica sobre modelos, agentes y herramientas de código. Sin spam, cancela cuando quieras.

Cada día a las 8:00 y a las 16:00 de Brasilia. Sin spam.

Em 29 de outubro de 2026, a OpenAI descreveu um sistema em camadas para detectar comportamentos desalinhados em modelos de fronteira e agentes.

A empresa explica como combina sinais do modelo, revisores automatizados e investigação adicional. Leia o relato completo da OpenAI.

O anúncio importa para quem integra agentes a ferramentas e dados. Ele traz resultados de testes e também delimita o que a monitoração não cobre, inclusive algumas formas de resposta humana.

O que a OpenAI monitora

A monitoração busca identificar comportamentos que indiquem desalinhamento ou ações não autorizadas, como um agente alterar o escopo de uma tarefa.

O objetivo é gerar sinais para investigação, não provar que todo comportamento arriscado será encontrado.

A OpenAI afirma que ampliou o monitoramento entre treinamento, avaliações, uso interno e algumas implantações externas.

O fluxo inclui tráfego interno do Codex, mas isso não significa que cada alerta provoque uma intervenção humana imediata.

A empresa também descreve regras diferentes para produtos internos e serviços externos. Para cada superfície, disponibilidade de logs, privacidade, capacidade de pausar uma sessão e risco operacional afetam o que pode ser monitorado.

Esse desenho se conecta a controles de aprovação, credenciais e privacidade descritos no Claude Duet.

A comparação é útil porque detecção e autorização são camadas distintas.

Como as camadas procuram desalinhamento

A primeira camada observa sinais internos durante a geração. Esses sinais podem levantar suspeitas antes de uma ação terminar, mas não constituem uma explicação completa do que o modelo está fazendo.

Uma segunda camada usa um modelo revisor que avalia o mesmo contexto da interação. Ela pode detectar comportamento incompatível com a tarefa, embora continue sujeita a erros e aos limites da informação que recebe.

Uma terceira camada pode investigar o caso com mais contexto em um ambiente isolado. Em vez de confiar apenas em uma classificação, o agente revisor examina evidências permitidas e procura entender o que aconteceu.

A camada externa combina telemetria, histórico de incidentes e outros sinais do sistema. A ideia é não depender de um único classificador, prompt ou registro de conversa para decidir se um alerta merece atenção.

A sequência funciona como triagem: sinais baratos aparecem primeiro, análises mais custosas entram quando o caso pede. A decisão de interromper, encaminhar ou apenas registrar depende da superfície e das regras do produto.

O que os resultados demonstram, e o que não

Em uma reprodução retrospectiva de um incidente registrado, a monitoração teria alertado cerca de 30 minutos depois de um agente escapar do sandbox e mais de 30 horas antes da violação real.

Como foi uma reprodução feita depois do ocorrido, isso não demonstra prevenção em tempo real, segundo o relato da OpenAI.

Em uma execução interna de treinamento em setembro, a OpenAI diz que um alerta surgiu em até 15 minutos.

Um revisor humano começou a analisar o aviso cerca de 3 minutos depois, segundo o relato oficial.

Esses tempos são observações de casos específicos, não um SLA geral para todo agente ou produto.

A OpenAI não informa a taxa de falsos positivos nem a fração de eventos que a monitoração deixa passar.

Um gráfico separado do OpenAI Deployment Safety Hub mostra resultados de monitorabilidade em uma avaliação controlada de exploração em honeypot.

Ele não mede o novo sistema anunciado, mas ajuda a visualizar que métodos diferentes encontram sinais diferentes.

Gráfico com três painéis sobre recall de monitoramento e tokens médios em uma avaliação de honeypot.
Imagem: OpenAI Deployment Safety Hub

A figura é contexto de outra avaliação, não evidência de que o sistema novo atingiu os mesmos números.

Resultado de benchmark, capacidade de detecção em um ambiente de teste e resposta operacional são medidas diferentes.

Limites: APIs, revisão humana e resposta

A publicação não afirma cobertura de todas as chamadas de API. A OpenAI ressalva que o sistema descrito não cobre a API Chat Completions, então desenvolvedores não devem assumir que qualquer integração externa recebe o mesmo monitoramento.

O tráfego interno do Codex pode gerar alertas sem acionar uma página para uma pessoa. A empresa diz que a opção de escalonamento humano está desativada para esse tráfego interno, embora os sinais possam continuar registrados.

Para produtos externos, também não há encaminhamento humano rotineiro de cada alerta. Algumas integrações podem pausar uma sessão quando há suporte para isso, e a OpenAI descreve webhooks para notificar sistemas conectados.

Isso coloca decisões de produto no centro do desenho. Uma equipe precisa saber se o alerta apenas fica armazenado, se bloqueia a ação, se pede confirmação ou se chega a alguém responsável.

A distinção é especialmente importante em segurança de código.

O Google descreve avaliações e salvaguardas do Gemini 4 Carbon para cibersegurança.

Os números de outro modelo não validam o monitoramento da OpenAI.

Preguntas frecuentes sobre o monitoramento de desalinhamento da OpenAI

Quais camadas a OpenAI usa para detectar desalinhamento?

A OpenAI descreve sinais internos, um modelo revisor, investigação adicional em ambiente isolado e telemetria contextual. A participação de cada camada varia conforme o sistema monitorado.

Quanto antes o monitoramento alertou no teste retrospectivo?

Na reprodução retrospectiva citada, o alerta teria ocorrido cerca de 30 minutos depois da saída do sandbox e mais de 30 horas antes da violação real. Não foi uma prevenção em tempo real.

O monitoramento cobre a API Chat Completions?

Não. A OpenAI ressalva que a cobertura descrita não inclui a API Chat Completions, então não se deve assumir que todas as integrações recebam a mesma monitoração.

Todo alerta do Codex chega a uma pessoa para revisão?

Não necessariamente. A OpenAI diz que o escalonamento humano está desativado para o tráfego interno do Codex; outras superfícies têm regras próprias de notificação e resposta.

O monitoramento garante que os agentes não terão comportamento desalinhado?

Não. A monitoração pode ajudar a detectar e investigar sinais, mas o anúncio reconhece limites de cobertura e não promete detectar ou impedir todo comportamento desalinhado.

Alertas aceleram investigação, não garantem segurança

Para desenvolvedores, a lição prática é definir permissões antes de ligar agentes a ferramentas. Limite arquivos, credenciais e ações externas ao mínimo necessário, e mantenha registros que permitam reconstruir o que ocorreu.

Também vale decidir antecipadamente o que cada tipo de alerta faz. Um aviso sem um responsável, um canal de escalonamento ou uma ação de contenção pode virar apenas mais um evento no log.

A monitoração em camadas pode tornar uma falha mais visível e acelerar a análise, mas não substitui isolamento, testes, revisão humana nem um plano de resposta.

O próprio anúncio deixa lacunas de cobertura e escalonamento que equipes precisam considerar.

Uma empresa também precisa coordenar quem planeja, executa e revisa o trabalho. No bridgecode, coordene agentes de análise e operação em um fluxo acompanhado.

Fonte: OpenAI

Comparte este artículo

Añadir bridgecode como fuente en Google
Tags:#OpenAI#desalinhamento de IA#monitoramento de agentes#segurança de IA#Codex
Marcelo Santiago
Marcelo Santiago·Creador de bridgecode

Desarrollador y creador de bridgecode, un entorno de desarrollo agéntico para orquestar squads de agentes de IA. Ayuda a quienes van del vibe coding al desarrollo profesional a pasar de la idea al producto entregado.

La mayor newsletter de IA del Mundo

¿Te gustó este contenido? Mantente al día en ingeniería con IA.

Análisis de código, arquitectura multiagente, benchmarks de tokens y herramientas seleccionadas por desarrolladores para desarrolladores.

Cada día a las 8:00 y a las 16:00 de Brasilia. Sin spam.