Checklist de produção

Agentes em produção: o que verificar e acompanhar

Uma lista de verificações para preparar o lançamento e acompanhar um agente depois que ele entra em uso.

Defina quem acompanha o agente, quais respostas serão revisadas e como incidentes serão tratados. Repita essas verificações quando houver mudanças de modelo, dados ou instruções.

Antes do lançamento

Conjunto de testes com casos comuns, limites e adversariais.
Critérios objetivos de resposta aceitável.
Permissões mínimas para cada ferramenta.
Transferência para uma pessoa testada de ponta a ponta.
Avisos e consentimentos adequados ao contexto.

Depois do lançamento

Amostra de conversas revisada periodicamente.
Falhas técnicas e de qualidade separadas.
Custos por conversa e por resultado acompanhados.
Mudanças de prompt e conhecimento versionadas.
Incidentes com responsável, resposta e aprendizado registrado.
Retenção e exclusão de dados alinhadas à LGPD.