Inteligência Artificial

Aprovar tudo é a forma mais cara de supervisionar um agente de IA

Atenção humana é recurso finito e tem preço. Quando a empresa gasta esse recurso confirmando o que já estava certo, ele some no momento em que uma decisão cara aparece. Quatro funções distintas de supervisão resolvem problemas diferentes, e escolher a errada produz fila em vez de controle.

Um agente prepara pagamentos e envia cada um para aprovação antes de executar. Existe uma pessoa no loop. Essa pessoa recebe algumas centenas de pedidos por dia, e cada pedido mostra o valor e um botão. Não mostra por que o pagamento foi criado, quais dados o agente usou nem o que saiu do padrão.

A etapa humana existe. A pergunta que importa é qual decisão essa pessoa consegue tomar.

Supervisão humana custa atenção, e atenção é um recurso finito com preço. Quando a empresa gasta esse recurso confirmando o que já estava certo, ele deixa de existir no momento em que uma decisão cara aparece. O desenho da supervisão, então, não é uma questão de segurança abstrata. É uma decisão de alocação.

A fila de aprovação gasta atenção onde ela rende menos

Se toda ação exige aprovação, o fluxo parece conservador. O efeito prático é outro. Ações de baixo impacto e decisões de consequência alta passam a competir pela mesma fila, no mesmo formato, com o mesmo tempo de tela.

A AWS trata supervisão uniforme como erro de desenho na sua orientação para agentes. Aplicar o mesmo nível de revisão a todas as ações cria gargalo nas atividades rotineiras e deixa as decisões de maior consequência sem a atenção adequada. O guia de IA agentiva do Governo do Canadá recomenda planejar quanto de supervisão será necessário e como ela será sustentada, e cita de forma explícita a fadiga de human in the loop como problema a considerar quando o uso de agentes cresce.

O custo aparece dos dois lados. De um lado, processos rotineiros param esperando um clique que não muda nada. Do outro, a decisão que precisava de julgamento chega na posição 180 de uma fila. Mais revisão não produz melhor revisão.

O revisor erra na direção do sistema, não contra ele

Existe um segundo motivo para não tratar aprovação humana como garantia. Pessoas tendem a aceitar recomendação automática com menos questionamento do que ela merece. O comportamento tem nome, viés de automação, e aparece citado de forma expressa no AI Act europeu ao tratar da supervisão de sistemas de alto risco. A norma determina que as pessoas responsáveis pela supervisão permaneçam atentas à tendência de confiar ou depender demais das saídas do sistema.

Uma revisão publicada em 2025 na AI & Society analisou estudos sobre dependência excessiva de recomendações de IA e encontrou que o comportamento varia com experiência, confiança, complexidade da verificação e forma como a informação é apresentada. A interface, portanto, faz parte do controle. Um sistema que apresenta a resposta como certa, esconde a incerteza relevante ou torna a verificação cara empurra o revisor para a confirmação.

Isso muda o que a empresa deveria medir. Contar aprovações registra atividade. Verificar se o revisor teve condição de discordar registra controle.

Aprovar antes serve quando o efeito é difícil de desfazer

A divisão a seguir é uma proposta consultiva da WatchZ. Ela organiza quatro funções distintas da supervisão humana, e cada uma resolve um problema diferente.

A primeira função é decidir antes que o agente produza consequência. Ela faz sentido quando existe uma escolha que exige julgamento e quando a intervenção acontece antes de um efeito caro de reverter. Pagamento acima de um limite, cancelamento de contrato, alteração de preço público e concessão de acesso entram nessa categoria.

O objetivo não é registrar uma assinatura humana no processo. É permitir que alguém avalie uma decisão que ainda pode mudar. Quando a ação já produziu efeito, a aprovação virou registro contábil.

Encaminhar exceção troca volume por relevância

A segunda função inverte o padrão. O processo segue dentro de condições conhecidas e só a exceção chega a uma pessoa. Uma exceção aparece quando uma regra entra em conflito com outra, quando falta informação necessária ou quando o caso sai do padrão previsto.

Nesse desenho a pessoa não revisa tudo. Ela recebe os casos em que o julgamento acrescenta algo que o fluxo automático não resolve com segurança. O ganho econômico é direto. A mesma hora de atenção passa a cobrir dez decisões difíceis em vez de quatrocentas triviais.

O alerta convoca quem não precisava acompanhar o fluxo

A terceira função começa fora do fluxo. O agente trabalha, o monitoramento observa, e certos sinais param o processo ou pedem intervenção. Um limite ultrapassado, um comportamento inesperado, um controle técnico que detecta algo fora da regra.

Aqui a pessoa não acompanha cada passo. Ela precisa conseguir entrar a tempo quando o sistema mostra que algo merece atenção, o que transfere o requisito para o desenho do alerta. Alerta que dispara sempre treina a organização a ignorá-lo, e alerta que nunca dispara não é controle.

A amostra encontra o erro que nenhuma regra previu

A quarta função acontece depois da execução. Nem todo erro pode ser antecipado antes da operação começar, e parte da supervisão serve justamente para descobrir padrões, desvios e problemas que os controles existentes não conhecem.

O guia do Governo do Canadá recomenda verificações ocasionais e comparação entre o resultado do agente e o trabalho de especialistas humanos, para perceber perda de qualidade ou mudança de comportamento. Essa revisão não bloqueia ação nenhuma. Ela responde se os controles continuam funcionando, e é a única das quatro funções que detecta a degradação silenciosa.

Infográfico da WatchZ intitulado 4 formas de usar supervisão humana em agentes de IA, com o subtítulo de que é um framework simples para decidir onde o julgamento humano realmente muda o resultado. Quatro colunas numeradas e ligadas por setas descrevem as funções. A primeira, aprovar antes, com ícone de pessoa e selo de confirmação, diz que a pessoa decide antes que uma ação relevante produza efeito, e lista ações de maior impacto, decisão antes da execução e escolhas difíceis de desfazer. A segunda, resolver exceções, com ícone de documento e sinal de atenção, diz que casos normais seguem e situações fora do padrão vão para revisão, e lista conflito entre regras, dados faltantes e casos fora do padrão. A terceira, intervir por alerta, com ícone de sino, diz que a pessoa entra quando um limite, risco ou comportamento inesperado aparece, e lista limites ultrapassados, comportamento inesperado e pausar e corrigir. A quarta, revisar amostras, com ícone de gráfico e lupa, diz que parte das ações é auditada depois para descobrir problemas que os controles ainda não conhecem, e lista auditoria periódica, novos padrões de erro e ajuste dos controles. Na base, uma faixa com o rótulo regra prática afirma que supervisão humana não é colocar uma pessoa em todas as etapas, é colocá-la onde sua decisão muda o resultado. O rodapé traz a linha pessoas e IA para decisões mais confiáveis.
As quatro funções resolvem problemas diferentes. Escolher a errada produz fila em vez de controle

Quatro condições dizem se um ponto de aprovação funciona

Antes de adicionar uma etapa de aprovação, vale testá-la contra quatro perguntas.

A pessoa sabe o que precisa avaliar. Sem saber qual risco procurar, a revisão fica superficial por construção.

A pessoa recebe informação suficiente para decidir. Mostrar só a conclusão raramente basta. Dependendo do caso, ela precisa da ação proposta, dos dados relevantes, das regras aplicadas e do que saiu do padrão.

A pessoa consegue discordar de verdade. O processo precisa permitir rejeitar, corrigir, pedir mais informação ou interromper a execução, sem custo operacional que desestimule o uso.

Existe tempo para agir. Aprovação que chega depois da consequência não funciona como prevenção.

Falta uma quinta pergunta, e ela costuma ser esquecida. O que acontece quando ninguém responde. A AWS recomenda que fluxos de aprovação tenham prazo e caminho de escalonamento. Sem isso, o processo fica parado por tempo indeterminado ou a operação cria um atalho informal para continuar funcionando, e o atalho informal é pior que a ausência do controle, porque não aparece em auditoria nenhuma.

O mesmo raciocínio de proporcionalidade aparece no Artigo 14 do AI Act, que exige medidas de supervisão proporcionais ao risco, ao nível de autonomia e ao contexto de uso, e estabelece que a pessoa consiga entender capacidades e limites, interpretar resultados e, quando apropriado, ignorar, substituir ou reverter uma saída. A obrigação legal vale para o recorte de sistemas de alto risco definido pela legislação europeia. O princípio de gestão que se extrai dela vale para qualquer agente com efeito material, e conversa com a autonomia que cada agente recebe.

Permissão e limite resolvem antes o que a fila resolveria depois

Existe um erro de sequência frequente. A empresa usa revisão humana para corrigir um processo que poderia ter sido limitado por desenho.

Se um agente não deveria acessar determinado dado, a proteção melhor é retirar a permissão. Se não deveria gastar acima de um valor, o sistema impõe o limite. Se não deveria executar muitas ações em poucos segundos, existe limite de frequência. Se uma ação específica nunca deveria ocorrer sem autorização, o próprio sistema bloqueia a execução até receber a aprovação.

O guia do Governo do Canadá recomenda combinar controles técnicos com human in the loop, citando permissões limitadas, acesso somente de leitura quando possível, limites de dados e frequência, registro das ações e um mecanismo externo para pausar ou desativar o agente.

O efeito é aritmético. Cada controle técnico retira uma classe inteira de decisões da fila humana, e a atenção que sobra vai para os casos em que julgamento, contexto ou escolha ainda são necessários. Essa calibragem entre exposição do caso de uso e intensidade do controle é o que sustenta a governança de IA proporcional ao risco, e é também o que separa a empresa que escala agentes da que trava neles.

Quantidade de aprovação não mede qualidade de supervisão

Uma empresa pode registrar centenas de aprovações humanas por dia e manter supervisão fraca. Pode registrar poucas e manter controles fortes. A diferença está no desenho, não no volume.

Boa supervisão deixa explícito qual decisão precisa de uma pessoa, por que essa decisão precisa de julgamento humano, qual informação a pessoa recebe, o que ela pode mudar, quanto tempo existe para agir e quais controles funcionam antes e depois daquele ponto. Empresas que já operam inteligência artificial com governança proporcional tratam essas seis respostas como parte do desenho do agente, não como política escrita depois do primeiro incidente.

O inventário é simples de começar. Liste os pontos em que uma pessoa participa do fluxo e descreva, para cada um, qual decisão ela deveria tomar. Onde não existir decisão clara, a etapa está consumindo atenção sem produzir controle, e o gestor que distribui autonomia é quem responde por essa conta.

Em quais pontos do seu fluxo a decisão humana muda o que acontece, e em quais ela apenas confirma o que o agente já decidiu?

Fontes

Nota: as quatro funções da supervisão humana são uma proposição consultiva da WatchZ, sem correspondência a norma regulatória ou framework de terceiro. O AI Act é citado apenas pelo princípio de proporcionalidade e pelas condições de supervisão efetiva que estabelece para sistemas de alto risco.

Dúvidas comuns sobre este insight

O que é human in the loop em agentes de IA?

É um desenho no qual uma pessoa entra em pontos definidos do fluxo para revisar, corrigir, aprovar ou rejeitar antes que certas ações continuem. Em agentes de IA o controle costuma ser posicionado antes de ações com consequência relevante, como pagamento acima de um limite, cancelamento de contrato ou concessão de acesso. É uma forma de supervisão, e não a única. Monitoramento com alerta, encaminhamento de exceção, auditoria por amostra e definição de limites antes da execução também são supervisão humana e funcionam fora do loop.

Qual a diferença entre human in the loop e supervisão humana?

Human in the loop coloca a pessoa dentro do fluxo, em um ponto de parada, decidindo caso a caso. Supervisão humana é o conceito mais amplo e inclui o que acontece fora do fluxo. A pessoa pode definir os limites antes de o agente entrar em produção, receber apenas exceções, ser convocada por um alerta de monitoramento ou auditar amostras depois da execução. Tratar os dois termos como sinônimos leva a empresa a acreditar que só existe um mecanismo de controle disponível, e a colocar aprovação em lugares onde ela não muda risco nenhum.

Como evitar que a aprovação humana vire gargalo?

Parando de enviar todas as ações para a mesma fila. Reserve aprovação prévia para a decisão em que o julgamento humano muda o risco ou o resultado, e cujo efeito seja caro de reverter. O que é objetivo pode ser controlado por regra, permissão ou limite de valor. O que sai do padrão vira exceção com caminho claro até a pessoa certa. Todo fluxo de aprovação precisa de prazo e escalonamento, porque sem isso o processo trava por tempo indeterminado ou a operação cria um atalho informal que não aparece em auditoria.

O que é viés de automação e por que ele afeta a supervisão de IA?

Viés de automação é a tendência de aceitar uma recomendação automática com menos questionamento do que ela merece. Uma revisão publicada em 2025 na AI & Society analisou estudos sobre dependência excessiva de recomendações de IA e encontrou que o comportamento varia com experiência, confiança, complexidade da verificação e forma como a informação é apresentada. Isso significa que a interface faz parte do controle. Um sistema que apresenta a resposta como certa, esconde a incerteza relevante ou torna a verificação cara empurra o revisor para a confirmação automática.

O que o Artigo 14 do AI Act exige de supervisão humana?

O Artigo 14 determina que as medidas de supervisão sejam proporcionais ao risco, ao nível de autonomia e ao contexto de uso, e estabelece condições para que ela seja efetiva. A pessoa precisa conseguir entender capacidades e limites do sistema, interpretar resultados e, quando apropriado, ignorar, substituir ou reverter uma saída. A norma também determina atenção à tendência de confiar demais nas saídas do sistema. A obrigação legal vale para o recorte de sistemas de alto risco definido pela legislação europeia, e não é regra universal para qualquer uso de IA.

Quer clareza sobre onde investir primeiro?

Diagnóstico completo de capacidades de tecnologia com roadmap de evolução conectado ao resultado financeiro.