Словарь
RULER
RULER — открытый бенчмарк NVIDIA для проверки реальной длины контекста языковых моделей. Он генерирует синтетические задания настраиваемой длины и сложности — поиск фактов среди отвлекающего текста, отслеживание цепочек связей, агрегация и вопросы-ответы, — что позволяет понять, с какой длины модель перестаёт справляться, а не полагаться на заявленный размер контекстного окна.