O Estado da Arte em IA de Código Aberto para Tarefas Legais na Suíça

Em 2026, a avaliação de modelos de inteligência artificial (IA) de código aberto para tarefas legais na Suíça revelou um cenário competitivo e diversificado. Foram analisados 13 modelos em três benchmarks legais suíços, totalizando 55.861 amostras avaliadas. Os resultados mostraram que não existe um modelo único que se destaque em todas as áreas, mas sim que cada um possui suas forças e fraquezas dependendo da tarefa específica.

A importância deste estudo reside na crescente adoção de IA no setor jurídico, onde a eficiência e a precisão são cruciais. Com a legalidade sendo um campo complexo e multifacetado, a capacidade de traduzir, resumir e raciocinar sobre textos legais em diferentes idiomas (alemão, francês e italiano) é fundamental.

A análise dos modelos permite que advogados e profissionais do direito façam escolhas informadas sobre qual tecnologia utilizar em suas práticas.

Os resultados indicam que o modelo GLM 5.2 é o mais adequado para tradução, enquanto o Nemotron e variantes do DeepSeek V4 se destacam em resumo e raciocínio legal aberto. O modelo Gemma 4 31B, por sua vez, é recomendado para implantação local, apresentando um desempenho notável em múltiplas tarefas, especialmente em questões de múltipla escolha.

A avaliação foi realizada com base em quatro grupos de tarefas: resumo, perguntas abertas de exame, tradução e questões de múltipla escolha, cada uma com uma escala de 0 a 100. O modelo Nemotron liderou o grupo de resumo, enquanto o GLM 5.2 se destacou na tradução, mas teve um desempenho inferior em questões de múltipla escolha.

Um aspecto interessante da análise é que a escolha do modelo deve ser feita com base na tarefa específica, e não apenas na classificação geral. Por exemplo, o GLM 5.2, embora seja o melhor tradutor, não se saiu bem em perguntas abertas de exame, o que pode ser um fator decisivo para advogados que necessitam de precisão em suas respostas.

Além disso, a pesquisa revelou que a complexidade do texto legal varia, com resumos de decisões judiciais sendo mais fáceis de traduzir do que leis e comunicados de imprensa. Essa variação deve ser considerada ao selecionar um modelo, pois o desempenho pode diferir significativamente entre diferentes tipos de documentos.

Outro ponto a ser destacado é a degradação da precisão em questões de múltipla escolha à medida que o número de opções aumenta. Modelos como Kimi K2.6 e Nemotron mostraram quedas acentuadas em suas taxas de acerto quando o número de alternativas passou de quatro para dezesseis, o que sugere que a complexidade das perguntas pode impactar a eficácia dos modelos.

A análise também revelou que o idioma italiano apresenta mais desafios em comparação ao alemão e francês, possivelmente devido à menor quantidade de dados disponíveis para treinamento. Isso é um fator importante a ser considerado, especialmente em um contexto jurídico onde a precisão é essencial.

Os resultados da avaliação foram integrados diretamente em uma ferramenta chamada lighteval, que permite que novos modelos sejam avaliados de forma eficiente. Essa integração facilita o processo de geração, julgamento e agregação de resultados, tornando-o mais acessível para desenvolvedores e pesquisadores.

Os modelos de IA de código aberto estão se tornando cada vez mais relevantes no setor jurídico, oferecendo soluções que podem aumentar a eficiência e a precisão das tarefas legais. No entanto, a escolha do modelo certo deve ser feita com cuidado, levando em consideração as especificidades de cada tarefa e as características dos textos legais envolvidos.

Os dados coletados e as análises realizadas fornecem uma base sólida para futuras pesquisas e desenvolvimentos na área de IA aplicada ao direito. À medida que a tecnologia avança, é provável que vejamos melhorias contínuas na capacidade dos modelos de lidar com a complexidade do texto legal.

Em resumo, a avaliação de modelos de IA de código aberto para tarefas legais na Suíça destaca a importância de uma abordagem personalizada na escolha de tecnologias. Com um mercado em rápida evolução, os profissionais do direito devem estar atentos às inovações e às melhores práticas para garantir que estão utilizando as ferramentas mais eficazes disponíveis.

Para aqueles que buscam implementar IA em suas práticas jurídicas, a análise dos modelos e suas capacidades é um passo crucial. A escolha do modelo certo pode não apenas melhorar a eficiência, mas também garantir que as decisões tomadas sejam baseadas em informações precisas e confiáveis.

A conclusão é clara: a IA de código aberto tem o potencial de transformar o setor jurídico, mas a implementação bem-sucedida depende de uma compreensão profunda das capacidades e limitações de cada modelo. Com a escolha certa, os profissionais do direito podem aproveitar ao máximo as vantagens que a tecnologia tem a oferecer.