Duas impressões da mesma análise sobre a mesa, lado a lado, com trechos divergentes circulados a caneta.

Porque a saída desses sistemas não é determinística. O mesmo conjunto de fatos, submetido à mesma ferramenta, devolve respostas diferentes ao longo do tempo, e basta uma atualização de modelo ou uma alteração no comando para que a resposta de janeiro se torne irreproduzível em setembro. A publicação estrangeira Artificial Lawyer sustentou, em 26 de agosto de 2026, que esse é o risco maior da IA jurídica em escala. A consequência prática interessa mais que a explicação técnica. Quando uma decisão apoiada em saída de inteligência artificial é impugnada, todas as decisões semelhantes ficam expostas ao mesmo argumento.

Alucinação é o erro que aparece na leitura de quem confere. Irreprodutibilidade só aparece quando alguém pede que você refaça o caminho, e o pedido chega meses depois, quando o modelo já mudou. O primeiro erro custa uma peça. O segundo custa o lote inteiro de peças, decisões ou pareceres produzidos sob a mesma rotina.

Por que a mesma pergunta não devolve a mesma resposta

São quatro causas, e nenhuma delas é defeito da ferramenta que você contratou.

A primeira está no funcionamento desses sistemas. Modelos de linguagem geram texto escolhendo entre alternativas prováveis, e essa escolha envolve amostragem. Rodar duas vezes produz textos diferentes por construção, mesmo com a configuração idêntica.

A segunda é o contexto. O que entrou na janela naquele uso, em que ordem, com quais documentos e com qual histórico de conversa muda o resultado. Duas pessoas do mesmo escritório, com o mesmo caso e o mesmo comando, entregam entradas diferentes sem perceber.

O comando é a terceira causa, e a mais subestimada. Uma palavra trocada, um exemplo acrescentado, uma instrução movida de lugar altera a saída, e é justamente por isso que a estrutura do prompt jurídico importa tanto. Comando que ninguém versiona é comando que muda sem registro.

A quarta escapa por inteiro do seu alcance. Fornecedores atualizam modelos, ajustam filtros e substituem versões, às vezes sem aviso e sem manter a anterior disponível. O sistema que respondeu em janeiro pode simplesmente não existir mais em setembro, e nenhuma disciplina interna recupera isso.

O que quebra quando alguém impugna a primeira decisão

Aqui está o ponto que separa este problema de uma curiosidade técnica.

Um erro isolado se resolve isoladamente. Quem citou um precedente inexistente corrige aquela citação, explica, e o problema termina naquele processo. Irreprodutibilidade tem efeito de conjunto. Se a mesma rotina automatizada produziu duzentas análises de contrato, duzentas triagens de demanda ou duzentas respostas administrativas, e uma delas é atacada com o argumento de que o critério não pode ser demonstrado, o argumento vale para as outras cento e noventa e nove.

O agravante é temporal. A impugnação chega quando o prazo já correu, o modelo já foi atualizado e o comando já foi ajustado três vezes por gente diferente. Refazer o caminho, nesse ponto, depende inteiramente do que alguém anotou no momento do uso.

Onde o direito brasileiro já cobra que o caminho seja demonstrável

Dois dispositivos, nenhum deles escrito pensando em inteligência artificial, já impõem essa exigência em situações concretas.

O art. 20 da Lei Geral de Proteção de Dados dá ao titular o direito de solicitar a revisão de decisões tomadas unicamente com base em tratamento automatizado que afetem seus interesses. O parágrafo primeiro obriga o controlador a fornecer informações claras e adequadas sobre os critérios e os procedimentos utilizados, observados os segredos comercial e industrial. Quem não consegue reproduzir a saída também não consegue descrever o critério que a produziu, e a ressalva do segredo comercial não cobre a ausência de resposta. As bases legais e os cuidados de tratamento que sustentam esse tipo de operação estão em o que a LGPD exige de quem usa IA jurídica.

O art. 50 da Lei 9.784/99 exige que o ato administrativo seja motivado, com indicação dos fatos e dos fundamentos jurídicos, e que a motivação seja explícita, clara e congruente. Ato administrativo construído sobre uma saída que ninguém consegue reconstruir tem motivação que existe no papel e não sobrevive a uma auditoria.

Uma ressalva de escopo, para o post não prometer mais do que entrega. Nenhum dos dois dispositivos incide automaticamente sobre uma petição escrita com apoio de inteligência artificial. Eles incidem onde a saída alimenta decisão, em órgão público, em programa de compliance, em análise de crédito, em triagem de demanda de massa. Para a peça processual, o problema equivalente é outro, e ele é documental. Quem precisa demonstrar que houve descuido e não deliberação depende de registro feito na hora, porque esse registro não se fabrica depois.

Quando a variação é aceitável, e quando ela é defeito

A regra que uso é de uma linha. Variação em texto que um humano vai reescrever de qualquer jeito é ruído tolerável. Variação em saída que alimenta decisão repetida é defeito.

Duas redações diferentes do mesmo parágrafo de fundamentação são irrelevantes, porque quem assina vai reescrever as duas. Duas classificações diferentes do mesmo contrato, ou dois cálculos distintos do mesmo prazo, são falhas de confiabilidade, e o problema não desaparece porque a segunda rodada acertou.

O teste é perguntar se as duas saídas levariam a decisões diferentes. Quando levariam, aquela tarefa precisa de registro antes de precisar de um comando melhor.

O registro mínimo que torna uma saída de IA defensável

Oito itens, anotados no momento do uso. Nenhum deles exige tecnologia nova, e é por isso que a falha aqui é sempre de rotina.

1. Data e hora da geração. É o que permite cruzar a saída com a versão de modelo vigente naquele dia, mesmo que o fornecedor não a informe.

2. Ferramenta, modelo e versão do modelo. O nome comercial não basta. O identificador de versão é o que distingue o sistema de janeiro do sistema de setembro.

3. O comando exato, com número de versão. O texto integral do prompt, palavra por palavra. Descrição do que o comando fazia não reconstrói saída nenhuma. Comando guardado em documento solto muda sem que ninguém saiba, e é esse o problema que a biblioteca de prompts compartilhada da equipe existe para resolver.

4. O que entrou como contexto. Quais documentos, em que ordem, com que recorte. Nome de arquivo e data de versão bastam na maioria dos casos.

5. Os parâmetros que a ferramenta expõe. Temperatura, modo de raciocínio, seleção de base de consulta, quando existirem e forem visíveis.

6. A saída bruta, antes de qualquer edição. Guardar apenas a versão editada torna impossível separar o que o sistema produziu do que a pessoa corrigiu.

7. O que foi alterado por decisão humana, e por quê. Uma linha por alteração relevante. É o que demonstra supervisão real quando ela for questionada.

8. Quem revisou, quando, e o que foi conferido em fonte primária. Sem isso, os sete itens anteriores documentam a máquina e deixam a pessoa de fora, que é justamente a parte que responde.

Esses oito itens são o conteúdo natural da política interna de uso de inteligência artificial. Um escritório que já tem regras escritas sobre quem usa, para quê e com qual conferência só precisa acrescentar o registro como obrigação, com um lugar definido para guardá-lo.

Por que trocar de modelo não resolve

A reação comum é procurar o sistema mais estável, e a busca faz sentido por outros motivos. Comparar como diferentes sistemas tratam o mesmo caso é útil para escolher a ferramenta certa para cada tarefa, e o exercício está descrito em um caso submetido a vários modelos.

Nenhuma escolha de modelo entrega reprodutibilidade. Reprodutibilidade é propriedade do registro, e um sistema mais consistente apenas reduz a variação que você precisa documentar. Comando bem construído produz o mesmo efeito, com a mesma limitação. Os dois diminuem o problema e nenhum dos dois o elimina, porque a atualização do fornecedor continua fora do seu controle.

Perguntas frequentes sobre variação de resposta da IA

Por que a IA dá respostas diferentes para a mesma pergunta?

Porque a geração de texto envolve amostragem entre alternativas prováveis, o que produz saídas distintas mesmo com a configuração idêntica. Somam-se a isso o contexto que entrou naquele uso, o comando exato empregado e as atualizações que o fornecedor aplica ao modelo ao longo do tempo.

Dá para configurar a IA para responder sempre a mesma coisa?

Dá para reduzir bastante a variação, com comando versionado, contexto fixo e parâmetros travados onde a ferramenta permitir. Eliminar não dá, porque a troca de versão do modelo pelo fornecedor está fora do alcance do usuário. Por isso a resposta prática é registrar, e a busca por determinismo total consome tempo sem entregar segurança.

Preciso guardar o prompt que usei em cada caso?

Precisa, com identificação de versão. O comando é a única parte do processo que está inteiramente sob seu controle, e sem ele nenhuma tentativa de reproduzir a saída faz sentido. Nos casos em que incide o art. 20 da LGPD, o prompt versionado é também o que sustenta a informação sobre critérios e procedimentos que o parágrafo primeiro exige.

Isso vale para petição ou só para decisão automatizada?

O regime jurídico da revisão de decisão automatizada alcança as situações em que a saída decide algo sobre alguém. Para a peça processual, a exigência é de outra ordem e é igualmente documental, porque quem for chamado a explicar uma citação ou uma análise precisará mostrar o que foi gerado, o que foi conferido e por quem.

O que este texto não resolve

O post trata de confiabilidade de saída, e não de qualidade jurídica. Uma resposta perfeitamente reproduzível pode estar errada, e o registro não corrige tese equivocada nem leitura ruim de prova. Ele também não descreve o comportamento de nenhum sistema específico, porque cada fornecedor documenta a própria política de versões de forma diferente, e essa checagem é contratual. Se a sua situação envolve decisão automatizada já tomada, com titular pedindo revisão ou com prazo administrativo em curso, isso é caso concreto e pede análise individual.

O que fazer na segunda de manhã

Escolha a tarefa que o escritório mais repete com apoio de inteligência artificial. Rode a mesma entrada duas vezes, em sessões separadas, no mesmo dia, e compare as duas saídas lado a lado. A diferença que aparecer é a sua variação de linha de base, e o número importa menos que a natureza dela. Se as duas saídas levariam a decisões diferentes, aquela tarefa não está pronta para escalar.

Depois faça a segunda pergunta, que é mais desconfortável. Pegue uma peça produzida há seis meses com apoio de inteligência artificial e tente reconstruir como ela foi gerada. Se você não souber qual comando foi usado nem qual versão do modelo respondeu, o registro dos oito itens deixou de ser recomendação e virou tarefa.

Comando que mora em documento solto muda sem deixar rastro, e o item 3 é o que falha primeiro em todo escritório. Prompt com versão, guardado num lugar só e usado pela equipe inteira, resolve esse item sem trabalho adicional de quem redige. Se hoje ninguém aí sabe dizer qual versão do comando gerou qual peça, veja o que cada plano do PromptJus inclui.