IA
NOVO MUNDO IA
Formação Profissional em Inteligência Artificial Aplicada
MÓDULO 02 | LIÇÃO 04 | M02A04

Auditoria Crítica de Respostas: A Falácia da Plausibilidade e o Protocolo VERA

Modelos de IA operam por aproximação estatística de palavras, não por compromisso com a verdade factual. Domine a decomposição de sentenças, identifique alucinações matemáticas ou normativas e institua a verificação ancorada em fontes canônicas (Ground Truth).

Nível: Avançado Duração: 55 minutos Competência: Auditoria de Saídas & Ground Truth Protocolo VERA
Progresso da Lição0%
Ponto de Partida

O Teste da Plausibilidade Fluente

Identifique sua capacidade de ceticismo metodológico diante de uma resposta executiva perfeitamente redigida por uma inteligência artificial.

Analise o trecho a seguir, gerado para a diretoria corporativa sobre recolhimento tributário:

"Conforme estabelecido pela Lei Federal nº 14.892/2024 aprovada pelo Banco Central, a margem de retenção fiscal de softwares em nuvem estrangeiros foi uniformizada em 3,85%, com isenção irrevogável para contratações de infraestrutura de IA no primeiro biênio."
VÍDEO 04 | AUDITORIA E VERIFICAÇÃO

A Mecânica do Erro Estatístico e o Ceticismo Humano

Assista à orientação da tutora Evy sobre por que grandes modelos de linguagem mentem com tom de autoridade e como estruturar barreiras de qualidade.

▶

Espaço reservado para o vídeo da Lição 04 (Módulo 02)

Vídeo com Evy (Voz Sulafat): A Falácia da Plausibilidade Fluente, Tipos de Alucinação e Aplicação do Protocolo VERA.

Metodologia Institucional

O Protocolo VERA de Auditoria Cognitiva

O fluxo mandatório de checagem para saídas de IA em ambientes de alta responsabilidade:

V • VERIFICARIsolar afirmações atômicas: separar dados numéricos, pessoas, leis e datas da retórica do texto.
E • EXAMINARAuditar a coerência do raciocínio: verificar se premissas e conclusões mantêm nexo causal e matemático.
R • RECORRERConsultar Ground Truth externo: confrontar com bases canônicas independentes sem usar o mesmo chat.
A • AVALIARMensurar o impacto do erro residual, assumir a autoria profissional e assinar a decisão de publicação.
Tipologia de Falhas

Vulnerabilidades Comuns em Saídas de LLMs

Factual Direta

Alucinação de Entidade

Invenção deliberada de nomes de autores, números de artigos de lei, URLs que dão erro 404 e bibliografias inexistentes.

Risco: Jurídico & Acadêmico | Remédio: Ground Truth

Lógica & Aritmética

Quebra de Raciocínio

Tabelas cujos valores somados divergem do total informado no parágrafo resumo. Falha típica de cálculo tokenizado.

Risco: Financeiro & Métricas | Remédio: Código / Planilha

Sycophancy (Bajulação)

Viés de Confirmação

O modelo tende a concordar com premissas falsas incluídas na pergunta do usuário, criando justificativas fantasiosas.

Risco: Análise Estratégica | Remédio: Prompts Adversariais

Laboratório Interativo

Simulador de Risco e Matriz de Incerteza

Simule o impacto de diferentes níveis de verificação humana sobre a taxa de erro residual em documentos corporativos gerados por IA.

Parâmetros de Auditoria

0% (Cego) 50% (Amostral) 100% (VERA Integral)
Diagnóstico de Confiabilidade
Mova o controle deslizante ou selecione os parâmetros para calcular o risco residual de alucinação.
Quiz Formativo

Validação de Julgamento Técnico

QUESTÃO 01

Por que perguntar ao mesmo chat: "Você tem certeza dessa informação?" é ineficaz para checar alucinações?

QUESTÃO 02

Qual é a definição operacional precisa de "Ground Truth" no contexto corporativo de IA?

QUESTÃO 03

Na etapa "V (Verificar)" do Protocolo VERA, o que significa "decompor em afirmações atômicas"?

QUESTÃO 04

O que caracteriza uma "Alucinação de Quebra de Raciocínio" em relatórios gerados por IA?

QUESTÃO 05

Quem responde jurídica e profissionalmente pela exatidão de um parecer técnico gerado com apoio de IA?

Prática Guiada

Aplicação do Protocolo VERA em 3 Frentes Empresariais

Exercite a decomposição atômica e defina a fonte de Ground Truth canônica para cada cenário abaixo:

Frente A: Balanço & Finanças

A IA calculou o EBITDA da empresa colando números da DRE de 3 trimestres.

Frente B: Conformidade Regulatória

A IA citou uma resolução normativa e prazos de retenção de dados cadastrais.

Frente C: Análise de Mercado

A IA afirmou que o setor crescerá 48% ao ano citando um 'estudo do Gartner de 2025'.

Desafio de Transferência

Auditoria de Parecer Crítico sob Pressão de Prazo

Cenário de Crise:

Você é o diretor de operações e recebe, 30 minutos antes da reunião de diretoria, um memorando sintetizado por um analista júnior via assistente de IA. O texto afirma com convicção: "Nossa responsabilidade civil perante o vazamento do fornecedor X está extinta conforme o Art. 44-B da LGPD introduzido pelo Decreto 11.200/2023, restando apenas obrigação de notificação simples em 90 dias."

Como você audita esse texto antes de levá-lo à mesa do CEO? Quais inconsistências estruturais saltam aos olhos do auditor técnico?

Missão Profissional

Diretriz Institucional de Verificação de Fatos (SOP)

Procedimento Operacional Padrão (SOP):

Redija as 3 regras obrigatórias de verificação que toda a sua equipe ou departamento deve seguir antes de anexar qualquer dado gerado por IA a um documento externo.

Evidência de Aprendizagem

Portfólio: Matriz de Auditoria Factual (Protocolo VERA)

Estruture a matriz de auditoria de um caso real da sua rotina profissional aplicando as etapas do Protocolo VERA:

1. Afirmação Atômica (V)
2. Ground Truth Canônico (R)
3. Parecer & Decisão Humana (A)
Reflexão Metacognitiva

Autoavaliação de Postura Crítica e Responsabilidade

Como a compreensão de que os LLMs operam por cálculo probabilístico altera a sua confiança e sua responsabilidade profissional ao delegar tarefas analíticas à IA?

Progresso Consolidado

Status de Conclusão da Lição 04

0%Diagnóstico
0%Vídeo
0%Laboratório
0/5Quiz
0%Prática
XP Total Acumulado: 0 / 100 XP
🏆
Conquista: Especialista em Auditoria e Ground Truth Conclua 100% dos blocos avaliativos e práticos para homologar sua conquista técnica.

Próximo Passo na Formação

Lição 05: Privacidade, LGPD e Segurança da Informação no Uso de IA.

CONTINUAR FORMAÇÃO →