Ampliação do estudo de LLMs e o Raciocínio
No estudo anterior, 4 questões foram aplicadas para 7 LLMs diferentes com o objetivo de identificar questões que elas acertavam e erravam.
Atualmente o estudo elaborou mais 4 questões e aplicou as questões para 10 LLMs (versões atualizadas dos 7 LLMs anteriores) e inclusão de novos. As questões também estão sendo avaliadas por pessoas.
Se você quiser contribuir, responda ao questionário disponível em: https://forms.gle/xVgGQYDzVjy5h4Kd9
Diferente da proposta da última prova da humanidade, que avalia as LLMs com questões extremamente difíceis e feitas por especialistas de diversas áreas, minha avaliação é voltada para raciocínio e conhecimento mais geral.