TriviaQA
Набор данных из вопросов любительских викторин на эрудицию с готовыми ответами и подобранными к ним документами-свидетельствами, созданный в Вашингтонском университете и Институте Аллена. Изначально предназначался для проверки понимания прочитанного текста, а для языковых моделей служит тестом фактических знаний, в том числе когда модель отвечает без документов, по памяти.
проверено по: arxiv.org ↗
В новостях
Cohere рассказала, как научила модель оценивать шансы до и после решения
Набор вопросов из любительских викторин на эрудицию с готовыми ответами; на нём проверяют фактические знания моделей.