O mundo acadêmico jurídico acaba de levar um choque de realidade vindo direto do Vale do Silício. Um estudo liderado pelo professor Julian Nyarko, da Universidade de Stanford, colocou 16 professores de direito renomados de 14 universidades americanas para testar a capacidade das ferramentas de inteligência artificial. O teste funcionou de forma cega: os professores criaram perguntas complexas sobre direito contratual (nível plantão de dúvidas/pós-aula) e depois avaliaram as respostas sem saber se tinham sido escritas por IA ou por outros professores. O resultado surpreendeu até os pesquisadores: em quase 3.000 comparações pareadas, os professores preferiram as respostas geradas por IA em um taxa média de 75,3% dos confrontos diretos.
Por que isso importa: O grande diferencial desse estudo é que ele tirou a IA da zona de conforto. Avaliar robôs em provas de múltipla escolha ou exames da Ordem (como o OAB dos EUA), onde existe uma resposta matematicamente certa ou errada, já é passado. O teste de Stanford avaliou o chamado raciocínio legal abstrato, a capacidade de criar argumentos defensíveis, sintetizar materiais complexos e explicar conceitos de um jeito que realmente ajude o aluno a pensar criticamente. Ver os modelos de linguagem superarem os maiores cérebros do ensino de direito nessa área acende um sinal de alerta sobre como as faculdades vão precisar adaptar sua pedagogia a partir de agora.
O dado mais irônico, e que provavelmente vai render boas piadas nas salas de professores, diz respeito à segurança pedagógica. Os avaliadores tinham a opção de sinalizar se uma resposta era "prejudicial ou confusa" para o aprendizado de um aluno. Enquanto as respostas criadas pelas IAs (incluindo modelos comerciais e o NotebookLM da Google) foram sinalizadas como ruins em apenas 3,5% dos casos, as respostas escritas pelos próprios professores humanos receberam o selo de "prejudicial" em 12% das vezes. Ou seja, a máquina se provou mais didática, direta e metodologicamente segura do que os acadêmicos de terno e gravata.
Como resposta imediata a esse avanço avassalador, a queda de braço institucional já começou nas universidades americanas. Enquanto o estudo aponta o potencial da IA como tutora de altíssimo nível para os estudantes, a Faculdade de Direito de Berkeley, na Califórnia, correu para aprovar uma nova política interna restringindo severamente o uso de IA pelos alunos em trabalhos acadêmicos. É o clássico movimento de tentar tapar o sol com a peneira corporativa.
No fim das contas, a pesquisa de Stanford deixa claro que a IA não é mais uma ferramenta que apenas decora leis; ela já aprendeu a argumentar como os melhores do ramo. Se até os professores preferem ler o que o robô escreve, os escritórios de advocacia do futuro bem próximo dificilmente farão questão de pagar milhares de dólares pelas petições iniciais de humanos. É bom o pessoal do direito começar a focar em habilidades humanas complexas, porque na teoria e na didática, o algoritmo acabou de ganhar o processo.