IA
Como validar a resposta da IA que 66% usam sem conferir

Como validar a resposta da IA que 66% usam sem conferir

Marcelo Franco

Marcelo Franco

August 11, 202622 min read

Como validar a resposta da IA que 66% usam sem conferir

66% dos profissionais usam o que a IA responde sem avaliar se está certo, segundo o estudo global da KPMG com a Universidade de Melbourne, que ouviu mais de 48 mil pessoas em 47 países. No Brasil, 49% já admitiram erro no trabalho por confiar na resposta.

Num escritório contábil, essa resposta não morre na tela: vira e-mail com o carimbo da casa e a assinatura de quem respondeu. Este artigo entrega o protocolo para validar a resposta da IA antes de ela chegar ao cliente: o que conferir, onde conferir, quanto custa pular a etapa e o que muda quando a ferramenta traz a fonte junto. Se a sua equipe já usa IA hoje, pule direto para as 4 conferências e aplique ainda nesta semana.

Principais conclusões

  • 66% usam resposta de IA sem avaliar se está certa
  • A resposta errada convence porque imita o formato da certa
  • Tribunais brasileiros já multam citação de IA protocolada sem conferência
  • A Receita veda decisão autônoma de IA desde fevereiro de 2026
  • As 4 conferências: existência, correspondência, vigência e competência

Índice

A adoção correu na frente da conferência

A discussão sobre adotar IA acabou sem cerimônia de encerramento. 74% dos profissionais usam ferramentas de IA várias vezes por semana, e 44% usam várias vezes ao dia, segundo o Thomson Reuters Institute. A ferramenta entrou na rotina. O processo de conferência, não.

O mesmo estudo da KPMG com a Universidade de Melbourne mede o tamanho desse vão: 66% usam o resultado da IA sem avaliar a exatidão.

O recorte brasileiro é ainda mais desconfortável. Por aqui, 86% dizem que suas empresas já usam IA, 49% admitem ter cometido erros por confiar em resultados dela e, ao mesmo tempo, 67% afirmam não confiar em conteúdo gerado por IA.

Leia essas três linhas juntas. A equipe usa todos os dias uma ferramenta em que diz não confiar, sem conferir o que ela entrega. O diagnóstico é de processo quebrado: a etapa de inspeção não existe no fluxo.

Barras comparando uso de IA sem conferência: 66% global, 49%, 67% e 86% no Brasil
Fonte: KPMG + Universidade de Melbourne, 2025 · KPMG Brasil, 2025

Eu conheço essa engrenagem por dentro. Fui sócio e COO de escritório de contabilidade em São Paulo, e a pressão que empurra a resposta sem conferência é sempre a mesma: a fila de dúvidas não espera, a resposta chega pronta e bem escrita, e conferir parece luxo com o cliente cobrando no WhatsApp.

Tem um agravante que o sócio costuma descobrir tarde. Sem um padrão da casa, cada analista inventa o seu: o júnior confia em tudo, o sênior refaz tudo na mão, e a qualidade da resposta passa a depender de quem estava de plantão.

Imagine dois escritórios recebendo a mesma pergunta de cliente às 9h da manhã. Os dois usam IA, os dois recebem uma resposta convincente em segundos. A diferença inteira está nos quatro minutos seguintes — e é ela que este artigo destrincha.

Antes do protocolo, você precisa ver por que a resposta errada passa tão fácil. A rotina que empurra sua equipe para a resposta imediata é a mesma que descrevi em a conta das interrupções no escritório contábil.

Por que a resposta errada convence

Alucinação é o nome técnico para um comportamento simples de descrever: a IA fabrica uma informação e a entrega com a mesma cara de certeza das verdadeiras. Sem aviso, sem hesitação.

Vamos olhar a mecânica disso, porque ela explica o risco. Um modelo de linguagem não consulta a lei quando responde; ele monta o texto mais provável a partir do que viu no treinamento. Quando falta a informação, o texto provável continua saindo, agora preenchido com uma norma plausível, um número plausível, uma data plausível.

O modelo não sabe que inventou. E o leitor, sem conferir, também não.

O tamanho do problema já foi medido. Pesquisadores de Stanford testaram mais de 200 mil consultas jurídicas por modelo e encontraram taxas de alucinação entre 69% e 88% nos modelos de propósito geral.

A resposta do mercado foi criar ferramentas especializadas, que consultam uma base de documentos antes de responder. Ajudou — e não resolveu. O estudo seguinte de Stanford mediu as principais ferramentas jurídicas do mercado americano: erro em mais de 17% das consultas nas melhores, mais de 34% na pior.

E há uma terceira camada, a que mais interessa a quem confere: a citação em si. O Tow Center, da Columbia, testou 8 buscadores de IA em 1.600 consultas sobre notícias reais. O conjunto errou em mais de 60% das consultas, com taxas entre 37% e 94% conforme a ferramenta.

O detalhe mais incômodo do estudo é o tipo de erro: citações apontando para o artigo errado, para versões republicadas do texto original ou para URLs que simplesmente não existem. A referência tinha cara de referência. Só não levava aonde dizia levar.

Barras de taxa de erro: IA geral 69% a 88%, buscadores acima de 60%, especializadas 17% a 34%
Fonte: Stanford HAI, 2024 · Tow Center / CJR, 2025

Aqui está o problema escondido atrás do sintoma. Ferramenta nenhuma acerta sempre; o perigo mora no erro que chega no formato de resposta certa: tom seguro, estrutura de parecer, citação com número de artigo e data.

O formato da citação é fácil de imitar. O conteúdo dela, não. É por isso que a vigilância de olhômetro falha: o olhômetro avalia o formato, e o formato está impecável.

Pense como um engenheiro de produção: peça polida também sai com defeito, e por isso nenhuma linha séria dispensa a inspeção final. Brilho não é teste de qualidade. Convicção no texto também não.

Se a diferença entre ferramenta genérica e especializada mudou sua leitura, o comparativo completo está em ChatGPT genérico vs IA fiscal especializada. O próximo passo aqui é outro: colocar preço em não conferir.

Quanto custa não conferir

O custo deixou de ser hipotético. Em outubro de 2025, o TRT da 12ª Região julgou uma petição com jurisprudência, doutrina e até nome de desembargador inexistentes. Na sentença, a peça foi descrita como produzida por IA generativa sem qualquer verificação humana.

Resultado: multa de R$ 3,7 mil por litigância de má-fé, o equivalente a 5% do valor da causa, além do caso remetido à OAB.

Em junho de 2026, a mesma cena no cível. O TJ-PR encontrou um precedente do STJ que nunca existiu, apontado como fabricado por IA, e aplicou multa de 2% sobre o valor atualizado da causa, com ofício à OAB do Paraná. O acórdão cravou a régua que interessa a toda profissão de assinatura: usar IA como apoio não afasta o dever de checagem rigorosa.

Linha do tempo das multas por citação de IA inventada nos tribunais TRT-12 e TJ-PR
Fonte: TRT-12, 2025 · TJ-PR via Migalhas, 2026

Esses casos são da advocacia, e o princípio não muda ao trocar de profissão. No nosso caso ele já está escrito há mais de vinte anos: pelo art. 1.177 do Código Civil, o contador preposto responde pessoalmente perante a empresa pelos atos culposos — e negligência na conferência é exatamente isso.

Em bom português: a multa do cliente autuado por uma orientação errada pode voltar para a mesa de quem orientou. No polo passivo aparece o nome do contador, nunca o da ferramenta que redigiu o texto.

E lembre da escala: o erro por excesso de confiança que 49% já admitiram se multiplica por cada analista que responde cliente, todos os dias. Basta uma resposta errada no cliente errado para pagar o ano inteiro de conferência que não foi feita.

Existe ainda um custo silencioso, anterior a qualquer autuação: o retrabalho. Quando a primeira resposta errada estoura, o sócio deixa de confiar no fluxo e passa a reconferir tudo pessoalmente. A ferramenta que prometia tirar o gargalo devolve o gargalo, com uma etapa a mais.

E há o custo comercial. O Thomson Reuters Institute mediu que 78% dos clientes consideram essencial receber ganho de qualidade vindo de IA, e só 6% dizem receber isso de forma consistente. O cliente compra a resposta em que pode confiar, com ou sem IA no meio.

Faça a conta de investidor: a conferência custa minutos de um profissional. O erro custa a multa, o cliente e o nome do escritório. Não existe planilha em que essa troca feche. Risco é dimensão de preço, e quem confere com método cobra melhor por isso, como mostro em precificação contábil por complexidade e risco.

A regra que a Receita Federal já segue

Enquanto muitos escritórios ainda tratam conferência como preferência pessoal, o maior órgão de administração tributária do país transformou o tema em norma. Em 5 de fevereiro de 2026, a Portaria RFB nº 647 instituiu a Política de Inteligência Artificial da Receita Federal, detalhada pelo CRCSP.

"Sistemas de IA poderão apoiar análises e triagens, mas não substituir a atuação humana." A mesma política registra que fica "vedado o uso de IA para tomada de decisões autônomas" e que "toda e qualquer decisão permanece sob responsabilidade exclusiva do agente público".

Leia o que está dito aí. O órgão com o maior interesse do país em automatizar análise fiscal decidiu, por escrito, que máquina não assina. A IA prepara, tria, acelera. Decide o humano, e a responsabilidade é dele.

A legislação geral vai na mesma direção, só que mais devagar. O marco legal da IA, o PL 2338/2023, foi aprovado no Senado em dezembro de 2024 e está na Câmara dos Deputados desde março de 2025 — em agosto de 2026, ainda não é lei.

A leitura prática: quem espera a lei geral ficar pronta para definir o padrão da casa vai operar anos sem padrão nenhum. A régua já existe, publicada por quem fiscaliza: IA apoia, humano decide e assina. Espelhe essa régua na política interna do escritório em uma página, antes que o primeiro susto escreva a política por você.

Repare no alinhamento raro: o Fisco, os tribunais e o Código Civil apontam para o mesmo lugar. A responsabilidade pela informação que sai é de quem assina, com ou sem IA no meio do caminho. Norma nova, aliás, vira pergunta de cliente no dia seguinte, como organizei em as perguntas que o cliente faz ao contador.

Se nem o Fisco deixa a máquina decidir sozinha, a pergunta que fica é por que a resposta dela chegaria ao seu cliente sem passar por ninguém.

O protocolo das 4 conferências

Resposta sem fonte não é resposta, é chute. Essa é a regra que não se quebra, e ela define o que inspecionar: a fonte. Você não precisa reprocessar o raciocínio da IA inteiro; basta conferir aquilo em que a resposta se apoia. São quatro conferências, nesta ordem, cada uma desenhada para um erro já documentado.

1. Existência

A fonte citada existe? Abra a URL. Procure a norma no site oficial, o processo no portal do tribunal, o estudo na página da instituição.

É o teste mais barato e o que mais pega. O Tow Center encontrou citações apontando para URLs fabricadas, e foi um desembargador inexistente que derrubou a petição no TRT-12. Fonte que não abre em site oficial mata a resposta aqui. Trinta segundos, veredito dado.

2. Correspondência

A fonte diz isso? Existir não basta. Leia o trecho e confira se ele sustenta a afirmação, com o número, a data e o artigo que a resposta usou.

Esse é o erro mais sofisticado do lote: a citação é verdadeira, o documento existe, e a conclusão atribuída a ele não está lá. Uma IN real citada para fundamentar um benefício que ela não concede passa na 1ª conferência e quebra na 2ª.

3. Vigência

Isso vale hoje? Norma existe, diz o que a resposta afirma, e foi alterada ou revogada depois. Confira a redação atual e o exercício a que a regra se aplica.

Legislação tributária muda de data em data e o treinamento da IA tem memória congelada: é assim que a norma revogada volta com cara de certeza. Alíquota, prazo e obrigação acessória se conferem contra o texto vigente, nunca contra a lembrança do modelo.

4. Competência

Quem publicou manda nisso? Afirmação atribuída à Receita se confere no site da Receita ou no conselho da categoria; número de estudo, na instituição que o publicou.

Agregador desconhecido repetindo uma sigla famosa é boato com gravata. A regra vale até para este artigo: cada número aqui está linkado ao publicador original, e a tabela do fim da página existe para você conferir cada um com a própria mão.

As 4 conferências: existência, correspondência, vigência e competência, e o erro que cada uma pega
Fonte: ContabilidadeGPT, 2026

Veja o protocolo numa resposta típica: "a empresa pode aproveitar o benefício, conforme a instrução normativa X, artigo Y". A inspeção vira quatro perguntas dirigidas:

  • Existência. A IN X está no site da Receita?
  • Correspondência. O artigo Y trata mesmo desse benefício, para esse regime?
  • Vigência. A redação do artigo é a atual ou já foi alterada?
  • Competência. Você leu isso no domínio oficial ou num blog que resume?

Quando a resposta passa, segue para o cliente com a base ao lado. Quando quebra, volta para a pesquisa antes de ganhar o carimbo da casa.

Repare numa coisa: nenhuma das quatro conferências exige entender de IA. Elas exigem o que o contador sabe fazer desde o estágio: ler norma na fonte. Uma habilidade antiga volta a ser etapa obrigatória do processo.

Essa é a inspeção final da linha de produção: o que sai para o cliente é a resposta assinada pela casa, e é ela que o protocolo protege. Antes dela existe a decisão-irmã, escolher a ferramenta com critério, que tratei em como avaliar uma IA para contabilidade antes de usar com clientes.

Pausa de um minuto: pular as quatro conferências custa o que você viu duas seções acima — 5% da causa, ofício ao conselho, cliente perdido. A próxima seção entrega a mesa de conferência pronta para distribuir para a equipe.

Onde conferir cada tipo de afirmação

A objeção clássica ao protocolo é "não tenho tempo de pesquisar tudo de novo". Ela confunde conferir com refazer. Conferir é abrir o endereço certo e ler o trecho certo, e cada tipo de afirmação tem um endereço certo.

Onde conferir cada tipo de afirmação
O que a resposta afirmaOnde conferirO que olhar
Lei federal ou lei complementarTexto compilado no site do PlanaltoRedação atual do artigo citado; se houve alteração ou revogação
Norma da Receita (portaria, IN, solução de consulta)Sítio oficial da Receita Federal; conselhos de classe (CFC, CRCs)Número, data e o que a norma de fato disciplina
JurisprudênciaPortal do tribunal, pelo número do processoO processo existe; relator, data e o que foi decidido de verdade
Prazo ou obrigação acessóriaAgenda oficial do órgão competenteA data vigente para o exercício atual, não a do ano do treino da IA
Estatística ou estudoPágina da instituição que publicouO número está lá, com amostra e ano; não aceite agregador
Fonte: elaboração própria, ContabilidadeGPT, 2026

A linha mais traiçoeira da tabela é a última. Quando a resposta diz "segundo o órgão X", a 4ª conferência manda abrir o domínio do órgão X, e não um blog que jura que o órgão X disse. A distância entre os dois é a distância entre fato e boato.

Transforme a tabela em ferramenta física: uma pasta de favoritos no navegador de cada analista, com os cinco endereços da coluna do meio, na mesma ordem. O hábito de trinta segundos nasce quando o endereço certo está a um clique, não a uma busca.

E a linha de prazos merece um alerta próprio: prazo é o tipo de afirmação que mais dói quando vem inventado, porque erra em silêncio e cobra com juros. Foi por isso que mapeei os prazos que mais pressionam o escritório contábil direto das agendas oficiais.

Como encaixar o protocolo na rotina sem travar o escritório

Protocolo que trava a operação morre na segunda semana. A saída é conferir na medida do risco, com uma régua de três níveis:

  1. Rascunho interno (estudo, brainstorm, texto que não sai da casa): 1ª conferência no mínimo. Fonte citada tem que abrir. Sem fonte, o rascunho não sobe de nível.
  2. Resposta que vai ao cliente (e-mail, WhatsApp, comunicado): as 4 conferências, feitas por quem assina a resposta.
  3. Parecer, defesa ou decisão de regime: as 4 conferências + segunda leitura de outro profissional antes da assinatura.

A regra de propriedade é uma só: quem assina, confere. A execução pode ser delegada; a responsabilidade da assinatura, não. É o desenho que o art. 1.177 já impõe ao contador e que a Portaria 647 espelhou do lado do Fisco.

Registre a conferência: uma linha na resposta interna, um campo no sistema, uma sigla de quem checou. Rastreabilidade transforma "acho que alguém viu" em "fulano conferiu na fonte tal", e essa frase muda o tom de qualquer conversa difícil com cliente ou fiscal.

Para saber se a régua pegou, meça o processo, não as pessoas. Na primeira semana, conte quantas respostas saíram para cliente e quantas saíram com registro de conferência. A distância entre os dois números é o tamanho real do seu risco, e vê-la cair semana a semana é o sinal de que o protocolo virou rotina.

Com equipe, a conferência vira cultivo. Coloque as 4 conferências no onboarding de cada júnior, ao lado do plano de contas: quem aprende a conferir no primeiro mês carrega o hábito pela carreira, e o sócio colhe uma equipe que resolve sozinha sem soltar chute com carimbo.

Lembre da frequência medida pelo Thomson Reuters Institute: 44% dos profissionais usam IA várias vezes ao dia. O que acontece várias vezes ao dia não pode depender de memória nem de heroísmo; tem que estar desenhado no fluxo, como mostrei em como criar um workflow de resposta fiscal com IA.

O que muda quando a ferramenta traz a fonte junto

Volte aos dois escritórios das 9h da manhã. No primeiro, a IA genérica entregou um texto convincente sem fonte nenhuma, e agora o analista caça a base legal. Vimos o que o Tow Center mediu sobre essa caçada: às vezes a fonte não existe.

No segundo escritório, a ferramenta foi estruturada para contador: a resposta chega com as fontes consultadas em cards, com título e URL clicável, que o profissional abre e confere com a própria mão. É assim que funciona no ContabilidadeGPT, onde 100% das respostas saem com base legal citada, a base é mantida atualizada e a plataforma confere a legislação antes de entregar. Por regra de comportamento, ela é proibida de inventar prazo, fato ou garantia.

O efeito no protocolo é direto. A 1ª e a 2ª conferências caem de uma caçada de minutos para um clique: a fonte já está aberta na sua frente, restando ler o trecho. A 3ª ganha o apoio de uma base mantida atualizada. A 4ª segue com você, e deve seguir.

Às 9h04, a diferença entre os dois escritórios ficou visível. No primeiro, o analista segue atrás de uma norma sem saber se ela existe. No segundo, a fonte já foi aberta, o trecho já foi lido, e a resposta saiu assinada com a base ao lado.

Comparação entre plataforma estruturada para contador e IA genérica: fonte, protocolo, vigência, regra e assinatura
Fonte: ContabilidadeGPT, 2026 · Stanford HAI, 2024 · Tow Center / CJR, 2025

Agora, a parte que um fornecedor honesto precisa dizer: ferramenta com fonte junto encurta a inspeção, não a substitui. A pesquisa de Stanford mostrou que até ferramentas especializadas, consultando base documental, erram em mais de 1 a cada 6 consultas. A diferença é que, com a fonte na mesa, o erro fica conferível em minutos — sem ela, fica invisível até a multa.

O contador interpreta, revisa e assina. É o desenho certo da profissão, o mesmo que a Receita adotou para si. A ferramenta boa não tenta assinar por você; ela deixa a assinatura mais segura e mais rápida.

É essa combinação de método e ferramenta que separa a operação consultiva da que apenas reage, como descrevi em o que separa um escritório comum de uma operação consultiva.

Perguntas frequentes sobre validar a resposta da IA

O que é alucinação de IA?

É quando a IA fabrica uma informação e a entrega com aparência de certeza: norma inexistente, número inventado, citação que não abre. Em consultas jurídicas específicas, pesquisa de Stanford mediu taxas de 69% a 88% nos modelos de propósito geral, testando mais de 200 mil perguntas por modelo.

Como saber se a resposta de uma IA está correta?

Inspecione a fonte com as 4 conferências: existência (a fonte abre?), correspondência (ela diz isso?), vigência (vale hoje?) e competência (quem publicou manda nisso?). Se a resposta não traz fonte, trate como rascunho: ela não segue para o cliente sem base conferida.

Quem responde pelo erro da IA no escritório contábil?

Quem assina a resposta. Pelo art. 1.177 do Código Civil, o contador preposto responde pessoalmente perante a empresa pelos atos culposos, e repassar informação errada sem conferir é ato culposo. A responsabilidade profissional não se transfere para a ferramenta que redigiu o texto.

O que a Portaria RFB 647 determina sobre o uso de IA?

Publicada em 5 de fevereiro de 2026, ela institui a Política de IA da Receita Federal: veda o uso de IA para decisões autônomas, mantém toda decisão sob responsabilidade exclusiva do agente público e limita os sistemas a apoiar análises e triagens, sem substituir a atuação humana.

IA que mostra a fonte dispensa conferência?

Não: ela encurta a conferência. Stanford mediu erro em mais de 1 a cada 6 consultas mesmo em ferramentas especializadas que consultam base documental. A fonte em card com link tira o custo da caçada e deixa a leitura do trecho, que é a parte que só o contador faz.

A equipe pode usar IA genérica no trabalho do escritório?

Pode, desde que a casa defina a régua: para rascunho interno, com a 1ª conferência no mínimo; para resposta a cliente, só com as 4 conferências completas. Sem regra escrita, o escritório entra na estatística dos 66% que usam sem avaliar, com o risco assinado pelo sócio.

O próximo passo

Nos próximos anos, a linha que separa escritórios vai ser ter ou não ter protocolo — usar IA deixou de separar quando 74% passaram a usar toda semana. Transforme esta página em política da casa: as 4 conferências como etapa obrigatória, a tabela de endereços na parede da equipe, a régua de três níveis no fluxo de resposta.

Os números desta página, para salvar

Tabela de insights: os números desta página
O númeroO que ele dizPublicado por
66%usam resultado de IA sem avaliar a exatidão (48 mil respondentes, 47 países)KPMG + Univ. Melbourne
49%no Brasil, admitem erro no trabalho por confiar em resultado de IAKPMG Brasil
69% a 88%alucinação de modelos gerais em consultas jurídicas (200 mil+ por modelo)Stanford HAI
mais de 1 em 6erro de ferramentas jurídicas especializadas, mesmo consultando base documentalStanford HAI
+60%consultas com resposta errada em teste de 8 buscadores de IA (1.600 consultas)Tow Center / CJR
5% da causamulta por petição com jurisprudência inventada por IA, sem verificação humanaTRT-12
fev/2026Portaria RFB 647 veda decisão autônoma de IA na Receita FederalCRCSP
Fonte: publicadores originais linkados em cada linha

O resultado aparece numa cena concreta: a sexta à tarde em que o sócio assina o parecer sem o frio na barriga, porque cada afirmação tem fonte aberta e conferida ao lado. É paz de espírito construída por processo, e dá para começar segunda de manhã.

Recomendo fortemente dois movimentos: assine a nossa newsletter de sexta para receber o recap da semana com as fontes já conferidas; e releia o protocolo para avaliar uma IA antes de usar com clientes. Os dois protocolos juntos fecham o circuito da confiança.

Na última semana, quantas respostas de IA saíram do seu escritório com a fonte conferida por alguém com nome e sobrenome?

Artigos relacionados

A conta das interrupções no escritório contábil
August 6, 2026

A conta das interrupções no escritório contábil

Cinco dias de contagem no WhatsApp do sócio: recebidas, repetidas e escaladas. A auditoria que transforma a sensação de semana engolida no número de horas sênior que define o teto real da escala.

Marcelo Franco

Marcelo Franco