Fundamentação
O modelo deve conseguir apontar a passagem que usou. Uma resposta fluente sem fonte não é evidência.
Agentes são úteis quando as ferramentas, os dados e a aprovação são desenhados. São um risco quando um prompt é tratado como produto.
Nomeie os passos que uma pessoa conseguiria auditar. Se não conseguir, não publique.
Qual decisão ou rascunho o modelo pode produzir? O que ele está proibido de enviar?
Quais documentos, tickets ou transcrições estão no escopo, e com a permissão de quem?
Cada ferramenta tem nome, esquema e raio de dano. MCP é um jeito de expô-las, não uma estratégia.
Ações irreversíveis param para uma pessoa. O registro diz quem aprovou o quê.
Um conjunto de casos que você consegue reexecutar quando o modelo, o índice ou o prompt muda.
Se a resposta depende dos seus documentos, o índice faz parte do sistema sob teste.
O modelo deve conseguir apontar a passagem que usou. Uma resposta fluente sem fonte não é evidência.
Trechos velhos e acesso amplo demais são como um bot prestativo vaza ou mente.
Fine-tuning muda estilo ou formato. Não substitui uma fonte de verdade que você pode atualizar amanhã.
O Model Context Protocol permite que um cliente chame ferramentas e leia recursos por um padrão. O risco continua sendo seu.
Um servidor que pode ler tudo uma hora será pedido para isso. Limite as ferramentas ao trabalho.
Texto não confiável, inclusive documentos recuperados e tickets, pode instruir o modelo a abusar de uma ferramenta. Trate saída de ferramenta e texto de documento como dado.
Escrever, apagar, pagar e enviar ficam atrás de uma aprovação até a avaliação dizer o contrário.
Escolha um modelo para a tarefa. Mantenha um jeito de perceber quando um mais barato está mentindo.
Um modelo pequeno para classificação, um mais forte para síntese, uma pessoa para o passo irreversível.
Perguntas com fontes conhecidas, casos de recusa e rastros de uso de ferramenta. Não uma única transcrição de demo.
Prompt, índice e versão de modelo são releases. Recebem a mesma desconfiança que código.
Não alegamos um programa de segurança certificado. Mesmo assim desenhamos para estas falhas.
Conteúdo de cliente, gravações e transcrições precisam de um propósito e de uma permissão. Conveniência não é um propósito.
Um agente que pode abrir um pull request ou enviar uma mensagem precisa de um registro e de um freio.
Uma nota de ranking não é um teste dos seus documentos. Se você não consegue falhar um caso, você não tem uma avaliação.
Não para uma ação relevante. Uma pessoa aprova. O modelo não se avalia.
Não. Páginas claras ajudam pessoas e máquinas a ler a oferta. Isso não é promessa de citação.
Dizemos se recuperação, um limite de ferramenta ou a decisão de esperar é o próximo passo honesto.