Confiança não é um número mágico: é uma decisão operacional baseada no risco, na evidência disponível e no custo de errar.
Comece pela tarefa e pelo risco
O NIST recomenda definir tarefas, contexto, escopo e responsabilidades de supervisão ao longo do ciclo de vida. Em atendimento, isso significa separar explicar política publicada, coletar dados, consultar um sistema, propor uma ação e executar uma mudança. Cada ação tem risco e evidência diferentes.
Uma resposta sobre horário pode usar uma fonte aprovada; uma alteração financeira, decisão clínica, acesso, compromisso contratual ou conflito exige regras adicionais e, muitas vezes, aprovação humana. Escreva limites por intenção, sistema, dado, valor e impacto, em vez de usar uma instrução genérica para “ser cuidadoso”.
- Tarefa e objetivo definidos
- Fonte permitida por intenção
- Dados que podem ser coletados
- Ações somente sugeridas ou executáveis
- Casos que exigem pessoa
Combine sinais em vez de confiar em um score isolado
A confiança operacional pode considerar cobertura da base, atualidade da fonte, correspondência entre pergunta e documento, consistência entre evidências, identidade verificada e capacidade de confirmar a ação no sistema oficial. Um único score do modelo não mede todos esses fatores.
Crie faixas com comportamento: responder com fonte, pedir esclarecimento, oferecer opções, buscar confirmação ou transferir. Quanto maior o impacto do erro, menor deve ser a tolerância. Registre por que a rota foi escolhida para que supervisão consiga revisar o padrão.
| Situação | Ação da IA | Proteção |
|---|---|---|
| Fonte clara e baixo risco | Responder e citar contexto | Registrar versão |
| Pergunta ambígua | Pedir um dado mínimo | Não inferir identidade |
| Fontes conflitantes | Parar e transferir | Mostrar divergência |
| Ação sensível | Preparar resumo | Aprovação humana |
Faça o fallback concluir uma transferência
Fallback não é a frase “procure nosso suporte”. A IA deve preservar a mensagem original, dados já confirmados, fontes consultadas, tentativas, incerteza, urgência e próxima ação. O destino precisa aceitar o caso; até isso acontecer, ele continua sob responsabilidade visível.
Teste pedidos diretos por uma pessoa, baixa evidência, base desatualizada, idioma inesperado, anexos, falha do sistema e risco emocional. Revise falsos seguros e falsos alarmes: respostas erradas que passaram e casos simples transferidos sem necessidade.
Como calibrar limites com conversas reais
Comece a política de confiança em um piloto pequeno, com um canal, uma equipe e um período definido. Registre a situação inicial, a regra que será testada, o responsável por exceções e a forma de voltar ao processo anterior. Teste casos normais, ambíguos, duplicados, fora do horário e com falha de integração antes de ampliar.
Durante o piloto, compare eventos e conversas reais, não apenas médias do painel. Separe falha de processo, fonte, integração, capacidade e execução; cada causa exige uma correção diferente. Ao final, documente a decisão de manter, ajustar, ampliar ou retirar, publique a regra aprovada e marque a próxima revisão.
Mantenha um registro simples com objetivo, escopo, dono, data, evidência, exceções e resultado. A regra precisa ser encontrada no lugar em que a equipe trabalha, e a pessoa responsável deve ter autoridade para corrigir ou interromper o fluxo. Assim, o aprendizado deixa de depender de memória individual e pode ser repetido por outro turno ou equipe.
Antes de ampliar, faça uma breve revisão com atendimento, gestão e quem mantém os sistemas envolvidos. Confirme que o cliente recebe uma resposta compreensível, que a equipe enxerga o responsável e que os relatórios representam o mesmo evento observado na conversa. Se essas três visões divergem, o piloto ainda não terminou.
Continue com IA e atendimento humano, Audite conversas de IA e Auditoria da operação. Use os guias em conjunto para que processo, tecnologia e gestão evoluam com a mesma definição operacional.
- Tarefas separadas por risco e impacto
- Fontes e versões visíveis
- Condições de parada documentadas
- Transferência preserva contexto e prioridade
- Destino humano confirma aceitação
- Amostra contém casos normais e adversariais
- Erros corrigem regra, fonte ou treinamento
