Teste da SemiAnalysis: quase nenhum modelo de IA é aprovado em tarefas de finanças e direito
2026-11-02 · Por Samuel Noronha · Resumo e análise
A SemiAnalysis lançou o GDPx, um conjunto de testes com tarefas profissionais em 11 áreas, de design de chips a finanças e direito, para medir os modelos de IA mais avançados. O melhor resultado geral foi de 12%, e a empresa aponta o Claude Opus 5.5 como o melhor modelo no conjunto. Em finanças e na área jurídica, pela nota binária (a tarefa só passa se cumprir o mínimo em todos os requisitos), praticamente todos os modelos ficaram em 0%. Nas notas parciais o desempenho é maior: na tarefa jurídica pública, o Opus 5.5 teve média de 44%.
- 11 áreas, entre elas design de chips, cibersegurança, biologia, finanças e direito
- Melhor resultado geral: 12%
- Finanças e direito: praticamente todos os modelos com 0% na nota binária (aprovado só se cumprir todos os requisitos)
- Na revisão pública de um estatuto societário de rodada Série B, nenhuma das 20 tentativas de quatro modelos foi utilizável
Por que importa: Os resultados medem tarefas reais de profissionais, em que um erro custa dinheiro ou direitos. Eles mostram a distância entre os modelos atuais e o trabalho completo de um especialista nessas áreas.
Análise AiLETH: Os modelos já acertam partes das tarefas, mas raramente entregam o trabalho inteiro sem erro, que é o que importa num documento jurídico ou num relatório financeiro. Na prática, o resultado reforça o uso da IA como assistente revisado por um profissional, e não como substituto. Vale lembrar que o teste é de uma única empresa de análise e ainda não foi replicado por outros grupos.
Fonte: SemiAnalysis