Ampliação do estudo de LLMs e o Raciocínio

No estudo anterior, 4 questões foram aplicadas para 7 LLMs diferentes com o objetivo de identificar questões que elas acertavam e erravam.

Atualmente o estudo elaborou mais 4 questões e aplicou as questões para 10 LLMs (versões atualizadas dos 7 LLMs anteriores) e inclusão de novos. As questões também estão sendo avaliadas por pessoas.

Se você quiser contribuir, responda ao questionário disponível em: https://forms.gle/xVgGQYDzVjy5h4Kd9

Diferente da proposta da última prova da humanidade, que avalia as LLMs com questões extremamente difíceis e feitas por especialistas de diversas áreas, minha avaliação é voltada para raciocínio e conhecimento mais geral.

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *

Este site utiliza o Akismet para reduzir spam. Saiba como seus dados em comentários são processados.