Ampliação do estudo de LLMs e o Raciocínio

No estudo anterior, 4 questões foram aplicadas para 7 LLMs diferentes com o objetivo de identificar questões que elas acertavam e erravam.

Atualmente o estudo elaborou mais 4 questões e aplicou as questões para 10 LLMs (versões atualizadas dos 7 LLMs anteriores) e inclusão de novos. As questões também estão sendo avaliadas por pessoas.

Se você quiser contribuir, responda ao questionário disponível em: https://forms.gle/xVgGQYDzVjy5h4Kd9

Diferente da proposta da última prova da humanidade, que avalia as LLMs com questões extremamente difíceis e feitas por especialistas de diversas áreas, minha avaliação é voltada para raciocínio e conhecimento mais geral.

Uma opinião sobre “Ampliação do estudo de LLMs e o Raciocínio

  1. Pingback: LLMs e o Raciocínio Lógico: Um Estudo de Caso com Desafios de Lógica – Professor Benjamin

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *

Este site utiliza o Akismet para reduzir spam. Saiba como seus dados em comentários são processados.