Times que trocam de modelo esperando respostas melhores costumam se decepcionar. O modelo raramente é o gargalo. O gargalo é o que ele tem para ler.
A qualidade das respostas de um agente é limitada pela qualidade da base de conhecimento, não pelo modelo. Se o trecho certo não existe ou não é encontrado pela busca, nenhum modelo o recupera. Melhorar a base (cobertura, atualidade e ausência de contradição) rende mais do que qualquer troca de modelo.
O que entra na base
A regra prática é começar pelo que já é mantido para pessoas, porque essas fontes têm dono e envelhecem devagar.
- Página de preços e de planos, porque é a dúvida mais cara de errar.
- FAQ e artigos de suporte, que já foram escritos como resposta a uma pergunta real.
- Catálogo de produto, com atributos que a pessoa usa para decidir: prazo, tamanho, compatibilidade.
- Políticas: troca, devolução, cancelamento, garantia.
- Documentação técnica, quando o público faz perguntas de integração.
E o que fica de fora, pelo menos no começo: PDF exportado uma vez, planilha no desktop de alguém, apresentação comercial de dois anos atrás. Não é que não sirvam, é que ninguém é responsável por atualizá-las, e conteúdo sem dono vira resposta errada com data marcada.
Contradição custa mais caro que lacuna
Uma pergunta sem resposta na base gera um “não sei, vou verificar”: chato, mas honesto. A mesma informação escrita de duas formas diferentes em dois lugares gera duas respostas plausíveis e nenhum critério de escolha. O RAG recupera as duas e o modelo escolhe uma, e você descobre qual foi quando o cliente reclama.
Antes de aumentar a base, vale reduzir: uma passada eliminando duplicata e informação desatualizada melhora a recuperação mais do que dobrar o número de documentos.
Estrutura importa mais do que volume
A busca não lê o documento inteiro: ela recupera pedaços. Documento com título descritivo, seções curtas e uma ideia por parágrafo se fragmenta bem. Um texto corrido de dez páginas, não, o pedaço recuperado chega sem o contexto que estava na página anterior.
1
Meça a cobertura pelas perguntas sem resposta
A parte mais útil de operar um agente é o log das perguntas em que ele não encontrou nada. É uma lista, ordenada por demanda real, do conteúdo que falta no seu site, e serve para a equipe de conteúdo muito além do agente. Cada item resolvido melhora o agente, o SEO e o time de suporte ao mesmo tempo.
Guardrails não substituem base
Um guardrail de fidelidade impede que o agente afirme algo que nenhum trecho sustenta. Isso evita o erro, mas não produz a resposta: o resultado é um “não sei” em vez de um preço errado. É o comportamento correto, e é também um lembrete de que a única forma de transformar esse “não sei” em resposta é escrever o conteúdo.
