Como escolher IA jurídica sem cair em promessas vazias: as sete perguntas

Escolher uma ferramenta de IA jurídica exige sete verificações: fontes detalhadas (quais, de qual jurisdição, atualizadas até quando), verificação com link para a fonte oficial, benchmark com metodologia pública, destino contratual dos dados, limites declarados pelo fornecedor, registro da diligência e condições de saída. A evidência publicada com revisão por pares (Universidad de Stanford, Journal of Empirical Legal Studies, 2025) mostra que as ferramentas especializadas reduzem o erro em comparação com os chats generalistas — em sua medição, entre 17% e 33% de falhas contra 43% do generalista — mas não o eliminam: por isso, «zero alucinações, garantido» é o primeiro sinal de alerta. Neste artigo: as sete perguntas desenvolvidas para levar à reunião comercial, e por que um tribunal espanhol já estabeleceu por escrito o custo da diligência.

Quando te venderem uma IA jurídica, a primeira frase do vendedor diz quase tudo. Se começar com «zero alucinações, garantido», você já pode encurtar a reunião. Não porque a ferramenta seja necessariamente ruim. Mas porque quem te promete o que a evidência publicada não sustenta está te pedindo fé — e no direito não trabalhamos com fé. Trabalhamos com fontes.

O que a evidência diz (a de verdade, com revisão por pares)

O estudo acadêmico de referência foi publicado pela Universidad de Stanford em uma revista jurídica revisada por pares. Ele mediu ferramentas de pesquisa jurídica com IA — as especializadas pagas, não os chats generalistas — e encontrou duas coisas ao mesmo tempo:

A boa notícia: as ferramentas especializadas reduzem bastante o erro em comparação com um chat generalista.

O dado incômodo: não o eliminam. Em suas medições, as especializadas falharam em um intervalo entre 17% e 33% dos casos, contra 43% do modelo generalista que usaram como comparação.

Aviso honesto sobre o escopo: eles mediram ferramentas americanas, sobre direito anglo-saxão. No mercado espanhol, não tenho conhecimento de uma medição equivalente publicada com metodologia aberta. Isso não tranquiliza: significa que aqui compramos com menos informação — e que as perguntas que se seguem são mais necessárias, não menos.

Um momento: o que é um «wrapper»?

A palavra que convém conhecer antes da lista. Um wrapper (invólucro) é um produto que apenas envolve um modelo de terceiros —o mesmo chat que você já usa de graça— com uma camada de marketing jurídico por cima, sem tecnologia própria relevante: sem corpus verificado, sem ancoragem a fontes oficiais, sem registro. Não é ilegal vendê-lo. Mas você deveria saber o que está comprando, porque o preço da camada de tinta às vezes é notável.

As sete perguntas (leve-as para a reunião)

1 · Sobre quais fontes trabalha — quais, de que jurisdição, atualizadas até quando?

«Milhões de documentos» não é uma resposta: é uma manchete. A resposta séria detalha: que tipos de documento, qual vigência, como é atualizado.

2 · Cada afirmação se conecta à sua fonte oficial?

A prova dos cinco segundos: você pede uma resposta com jurisprudência e verifica se cada citação abre a resolução oficial ou se você precisa procurá-la manualmente e rezar.

3 · Publicam um benchmark com metodologia — ou me pedem para acreditar?

Um benchmark sério diz o que foi medido, como, com quantos casos e onde falha. Um número redondo sem metodologia é marketing com decimais.

4 · Para onde vão meus dados?

Onde são processados, se são usados para treinamento, quem pode vê-los, como são excluídos. Por contrato, não verbalmente. (Se você leu o artigo sobre IA e sigilo profissional, já sabe por que essa pergunta não é negociável.)

5 · Que limites vocês declaram?

Uma ferramenta séria publica o que NÃO faz. Aquela que «faz tudo» — pesquisa, redação, contabilidade e o café — geralmente não faz nada bem. A confissão de limites é o melhor sinal de engenharia honesta que existe.

6 · O que fica registrado da minha diligência?

No dia em que alguém te perguntar se você verificou — e esta série começou com um tribunal perguntando exatamente isso — você tem um registro, ou tem memória?

7 · O que acontece se eu sair?

Exportação dos meus dados, formato, prazo, custo. A facilidade de saída é a melhor medida da confiança do fornecedor em seu produto.

O preço da diligência (foi fixado por um tribunal, não por um vendedor)

Talvez você se lembre do detalhe do caso das 48 sentenças que não existiam: quando o tribunal das Canárias calculou a multa para o advogado, tomou como referência o custo das ferramentas sérias de IA jurídica — deixou registrado «planos a partir de 70 euros mensais», de acordo com a nota oficial do Poder Judicial.

Então, a pergunta sobre o preço está mal formulada. Não é «70 euros por mês é caro?». É: comparado com o quê? Com as horas que você perde verificando manualmente o que um chat gratuito te dá? Com o dia em que você não verificar? Um tribunal já fez essa conta por escrito. O resultado foi a favor da ferramenta.

As referências de preço do mercado mudam; o valor citado é o que a própria decisão judicial deixou por escrito em fevereiro de 2026 — este artigo não recomenda preço nem fornecedor.

A parte onde este exame me examina

Serei transparente: há semanas venho contando a vocês que estou construindo um sistema de trabalho com IA para escritórios. Estas sete perguntas também valem para mim. O que estou construindo terá que respondê-las por escrito — corpus detalhado, benchmark com metodologia pública, arquitetura de dados e registro — ou não merecerá ser vendido. Publicar o exame antes de se apresentar a ele é a parte do «sem fumaça» que não se pode fingir.

Perguntas frequentes

O que é um «wrapper» em IA jurídica?

Um produto que apenas envolve um modelo de terceiros — o mesmo chat generalista de sempre — com uma camada de marketing jurídico, sem tecnologia própria relevante: sem corpus verificado, sem ancoragem a fontes oficiais, sem registro da atividade. Não é ilegal vendê-lo, mas é bom saber o que se compra: as sete perguntas deste artigo o detectam em uma reunião.

Que taxa de erro as ferramentas de IA jurídica têm?

A única medição acadêmica com revisão por pares (Stanford, Journal of Empirical Legal Studies, 2025) encontrou entre 17% e 33% de falhas em ferramentas especializadas pagas, frente a 43% do modelo generalista de comparação — sobre ferramentas americanas e direito anglo-saxão. Reduzem o erro; não o eliminam. Do mercado espanhol não consta uma medição equivalente com metodologia aberta.

O que um benchmark sério de uma IA jurídica deve incluir?

O que foi medido, como foi medido, com quantos casos, de que tipos, e onde a ferramenta falha. Uma porcentagem redonda sem metodologia publicada não é um benchmark: é marketing com decimais. Se o fornecedor não pode mostrar a metodologia, a resposta honesta é que não a tem.

Quanto custa uma IA jurídica séria?

As referências de mercado mudam, mas há um valor com significado especial: ao calcular uma sanção por citações inventadas, o TSJ de Canárias tomou como referência ferramentas com «planos a partir de 70 euros mensais» (decisão de fevereiro de 2026). Mais útil que o preço absoluto é a comparação: quanto custa a alternativa em horas de verificação manual — ou no dia em que não for verificada.

O que devo perguntar sobre meus dados antes de contratar?

Quatro coisas, por contrato e não de boca: onde são processados (jurisdição), se são usados para treinamento (e como se excluir), quem pode acessar, e como e quando são apagados — incluindo a exportação se você decidir sair. A facilidade de saída é a melhor medida da confiança do fornecedor em seu próprio produto.

Fontes deste artigo

• Magesh et al., Journal of Empirical Legal Studies (Stanford, 2025)
• Nota oficial do Poder Judiciário (decisão do TSJ das Canárias)
• Desta série: as 48 sentenças que não existiam e IA e segredo profissional.

Fontes verificadas em 6-jul-2026. Neste blog não se pede fé: a fonte é linkada.

A cada duas semanas publico uma análise como esta na newsletter PYME Digital PRO: digitalização de escritórios, consultorias e PMEs profissionais, sem enrolação. Inscreva-se no LinkedIn.