Cite a versão exata do documento: fontes que a equipe confere em segundos

Uma resposta de agente de IA só é útil para a empresa quando alguém consegue conferi-la. A solução prática é guardar, junto de cada resposta, o identificador e a versão de cada documento em que o agente se apoiou, e mostrar essa referência ao lado da afirmação, para que a equipe abra o trecho exato em segundos. Este artigo explica o que um registro de citação deve conter, como fazer o agente produzi-lo e como manter as citações corretas quando os documentos mudam.

Principais pontos

• Cite um identificador estável do documento, um identificador de versão e a localização da seção, não apenas o nome do arquivo.
• Registre a referência no momento da busca, porque o arquivo pode ser substituído depois.
• Anexe uma referência a cada afirmação factual e marque como não verificada qualquer afirmação sem referência.
• Dê à equipe um caminho claro da resposta até o trecho exato, para que ela confirme ou corrija com rapidez.
• Revise a qualidade das citações em uma rotina definida, do mesmo modo que você revisa a própria base de conhecimento.

Por que o nome do arquivo não basta para verificar uma resposta

Uma citação que diz “Política de Garantia.docx” indica onde procurar, mas não mostra o que o agente realmente leu. Políticas são revisadas, tabelas de preços são substituídas e uma pasta compartilhada costuma guardar várias cópias quase idênticas. Quando alguém confere uma resposta semanas depois, o arquivo pode dizer algo diferente do texto que o agente usou. A verificação vira então uma busca entre versões, justamente o trabalho que a citação deveria eliminar.

Verificar uma afirmação exige três informações: qual documento, qual versão e qual trecho. A versão é a que a maioria das equipes deixa de fora, e é ela que determina se a afirmação era verdadeira no momento em que foi feita.

O que um registro de citação deve conter

Um registro de citação é a pequena entrada estruturada que acompanha cada resposta. Ele deve ser simples o bastante para ser guardado em qualquer banco de dados ou log, e completo o bastante para que uma pessoa encontre o mesmo texto novamente. Um registro que funciona inclui:

• Um identificador do documento que permanece o mesmo entre versões, como um código interno ou número de registro.
• Um identificador de versão ou impressão digital do conteúdo, registrado no momento em que o documento foi indexado.
• A data de revisão conforme consta no sistema do próprio responsável, não uma data deduzida pelo agente.
• Uma localização na seção, como o caminho dos títulos, a referência de página ou o rótulo do parágrafo.
• Um trecho curto da passagem em que o agente se apoiou.
• O horário da busca e a interação que a referência sustentou.
• O nome do responsável pelo documento, para que as dúvidas cheguem a uma pessoa e não a uma caixa de entrada compartilhada.

O trecho pesa mais do que as equipes costumam esperar. Se a fonte for editada depois, o trecho guardado ainda mostra o que o agente leu naquele momento.

Passo a passo: fazer o agente citar a versão que usou

Boa parte do trabalho é de preparação. O próprio agente precisa de um contrato claro sobre o que devolve, e a camada de busca precisa levar os metadados adiante, em vez de descartá-los. Uma sequência prática:

• Atribua um identificador estável a cada documento de origem antes da indexação e defina o responsável por cada um.
• Indexe cada versão como um registro próprio e marque qual é a versão vigente.
• Faça a etapa de busca devolver o identificador, a versão e a localização junto de cada trecho, e não apenas o texto do trecho.
• Exija que o formato da resposta anexe uma referência a cada afirmação factual e rejeite respostas que as omitam.
• Marque como não verificada, na saída, qualquer afirmação sem referência correspondente, para que a equipe saiba quais frases precisam de conferência.
• Guarde o conjunto de referências junto da interação, para que ele possa ser auditado depois.
• Teste com perguntas cuja resposta correta mudou entre duas versões do mesmo documento.

A última etapa é a que comprova que o sistema funciona. Uma citação que aponta para o documento certo, mas para a versão errada, continua sendo uma falha.

Cenário ilustrativo: uma pergunta sobre garantia depois de uma atualização de política

Cenário ilustrativo: um cliente pergunta por quanto tempo um reparo tem garantia. O agente responde com base na versão da política de garantia que estava vigente no momento da busca, e a resposta cita o identificador e a seção dessa versão. Um mês depois, a política é revisada. Um membro da equipe que abre a citação antiga vê o rótulo da versão e o status de revisão, e assim sabe que a resposta é anterior à mudança e pode decidir se o cliente precisa de uma atualização. Sem a versão no registro, essa mesma pessoa compararia a resposta antiga com a política nova, presumiria que o agente errou e gastaria tempo reconstruindo o que aconteceu.

O cenário mostra por que a versão é o elemento central. A resposta não estava necessariamente errada. Ela era precisa para um documento que já não regia a pergunta, e a citação deixou isso visível em um único passo.

Como lidar com respostas que combinam várias fontes

Muitas respostas úteis se apoiam em mais de um documento: por exemplo, uma regra de precificação, uma nota de exceção e uma correção recente feita pela equipe. Cada afirmação deve citar a própria fonte, em vez de terminar com uma única lista de referências no fim. Assim, a equipe enxerga qual frase depende de qual trecho.

Quando duas fontes divergem, a resposta deve mostrar as duas e dizer que elas entram em conflito, em vez de misturá-las em uma frase segura de si. As regras para escolher qual fato prevalece são uma decisão de negócio e pertencem ao processo, não ao palpite do modelo. O guia Memórias conflitantes em agentes de IA: qual fato prevalece? explica como definir essas regras.

O texto recuperado também precisa de um limite. Um documento pode conter frases que parecem instruções, e o agente deve tratar o conteúdo recuperado como material para citar e conferir, não como comandos a seguir. A citação facilita essa auditoria, porque a equipe pode ver exatamente qual trecho influenciou a resposta.

Conferir as citações, não apenas as respostas

A maior parte da avaliação se concentra em saber se a resposta está correta. As checagens de citação fazem uma segunda pergunta: o trecho citado realmente sustenta a afirmação? São testes diferentes, e uma resposta pode estar certa pelo motivo errado. Uma amostra mensal de respostas, conferida por alguém que conhece o assunto, identifica lacunas que as verificações automáticas deixam passar. Ferramentas de avaliação podem ajudar a checar se cada afirmação é sustentada pelo texto que cita, mas uma pessoa nomeada deve sempre revisar os resultados.

A camada de busca também merece um teste próprio. Se o agente cita o trecho errado, o problema costuma estar na forma como o conteúdo foi dividido ou ordenado, e não na maneira como o modelo redigiu a frase. O método em Como testar a qualidade da busca em uma base de IA é um bom ponto de partida.

Manter as citações corretas conforme os documentos mudam

Quando um documento é substituído, as citações antigas não se tornam falsas. Elas continuam sendo um registro correto do que o agente leu na época. O que muda é o status delas. O sistema deve sinalizar as citações que apontam para versões substituídas, e o responsável pelo documento deve decidir se as respostas afetadas precisam ser corrigidas para clientes ou para a equipe.

Esta é a manutenção comum de uma base de conhecimento, com uma camada de citação por cima. Cada documento precisa de um responsável, de uma data de revisão definida por esse responsável e de uma regra clara para aposentar versões antigas. A rotina descrita em Manutenção da base de conhecimento de IA: responsáveis e rotina mostra como atribuir essas responsabilidades sem criar um comitê.

Para equipes que dependem das mesmas orientações em muitas conversas, também ajuda decidir quais fontes o agente pode tratar como oficiais. Os princípios em Como definir fontes oficiais para um agente de IA explicam por que uma única fonte que governa cada tema é mais fácil de verificar do que um conjunto de arquivos sobrepostos.

Como a Be Human trabalha respostas com citação em operações gerenciadas

Em um projeto com a Be Human, o registro de citação é definido na primeira fase, junto com o papel único que o agente vai desempenhar, a memória e as ferramentas de que ele precisa e os limites de aprovação em torno delas. Os identificadores e os responsáveis dos documentos são combinados com as pessoas que mantêm as fontes. O agente é configurado para devolver referências a cada afirmação factual, e as avaliações recorrentes incluem uma amostra de citações, para que a divergência entre resposta e fonte seja percebida cedo. As revisões de permissão cobrem quem pode alterar as fontes e quem pode aprovar uma correção. Quando uma resposta cita a versão errada, ela é tratada como incidente, com causa registrada e correção controlada, e não como uma edição pontual. Se você quer identificar a primeira tarefa que vale entregar a um agente, o diagnóstico gratuito de IA da Be Human é um bom ponto de partida.

Perguntas frequentes

Um link para uma pasta compartilhada basta para tornar uma resposta de IA verificável? Um link para uma pasta aponta para um local, mas não mostra qual versão o agente leu nem qual trecho sustentou a afirmação. A equipe pode abrir o arquivo e encontrar uma redação diferente da usada pelo agente. Uma resposta verificável guarda o identificador do documento, a versão, a localização e um trecho curto junto da interação.

As citações deixam o agente mais lento ou as respostas mais longas? Elas acrescentam algum processamento na busca e algumas referências curtas na saída, o que costuma ser um custo pequeno comparado ao tempo que a equipe gastaria conferindo afirmações manualmente. As referências podem aparecer como marcadores compactos que se expandem sob demanda. A escolha de projeto mais importante é manter o registro completo no log e mostrar na resposta apenas o que o leitor precisa.

O que deve acontecer quando o documento citado foi atualizado depois da resposta? A citação original continua correta como registro do que foi lido naquele momento, mas o sistema deve marcá-la como substituída. Em seguida, o responsável pelo documento decide se a resposta anterior precisa de correção para as pessoas que a receberam. Isso mantém a trilha de auditoria intacta sem fingir que a resposta antiga se baseou no texto novo.

Uma pequena empresa consegue configurar isso sem uma equipe de dados? Uma equipe pequena pode começar com uma planilha de identificadores de documentos, responsáveis e versões vigentes, e exigir que o agente devolva uma referência para cada afirmação. O trabalho técnico é, sobretudo, manter metadados consistentes e um formato de resposta claro. Um parceiro de implantação remoto pode cuidar da configuração da busca e das verificações de avaliação, enquanto a empresa mantém a responsabilidade pelas fontes e pelas decisões sobre qual versão governa.

Orientação editorial Be Human. Exemplos são ilustrativos, salvo atribuição explícita. Fontes oferecem contexto; a implementação depende do seu processo.