К содержимому

Датасет · zai-org

Бенчмарк понимания научных статей по рецензиям

zai-org/RPC-Bench

Датасет на основе рецензий и ответов авторов для оценки текстового и визуального анализа статей.

Что внутри

Детализированный бенчмарк на английском языке, построенный на переписке рецензентов и авторов научных статей. Поддерживает оценку как в текстовом, так и в визуальном формате благодаря различным представлениям документов. Разделен на выборки train, dev и test, общий размер от 100 тыс. до 1 млн записей.

Что можно сделать

  • Оценка способностей мультимодальных и языковых моделей к глубокому анализу научных статей
  • Обучение систем вопросно-ответного поиска по сложным академическим документам
Задачи
Вопрос-ответ
Языки
Английский
Размер
100K–1M записей
Скачиваний за месяц
135,8 тыс.
Лайков
6

Как загрузить

from datasets import load_dataset

ds = load_dataset("zai-org/RPC-Bench")