Датасет · zai-org
Бенчмарк понимания научных статей по рецензиям
zai-org/RPC-Bench
Датасет на основе рецензий и ответов авторов для оценки текстового и визуального анализа статей.
Что внутри
Детализированный бенчмарк на английском языке, построенный на переписке рецензентов и авторов научных статей. Поддерживает оценку как в текстовом, так и в визуальном формате благодаря различным представлениям документов. Разделен на выборки train, dev и test, общий размер от 100 тыс. до 1 млн записей.
Что можно сделать
- Оценка способностей мультимодальных и языковых моделей к глубокому анализу научных статей
- Обучение систем вопросно-ответного поиска по сложным академическим документам
- Задачи
- Вопрос-ответ
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 135,8 тыс.
- Лайков
- 6
Как загрузить
from datasets import load_dataset
ds = load_dataset("zai-org/RPC-Bench")