К содержимому

Датасет · hashmortar

Вопросы и ответы по таблицам, PDF и документам

hashmortar/spreadsheet-bench-v2-modified

Набор из 1060 вопросов и эталонных ответов на английском языке по 171 бизнес-документу разных форматов.

Что внутри

Датасет содержит 1060 пар «вопрос — эталонный ответ» на английском языке, привязанных к 127 таблицам Excel, 35 PDF-файлам и 9 документам DOCX. Это переработанная версия бенчмарка SpreadsheetBench 2, где фокус смещен с редактирования таблиц на поиск, интерпретацию и объединение фактов из нескольких источников. Все исходные файлы взяты из открытых источников, а аннотации написаны заново.

Что можно сделать

  • Оценка качества RAG-систем на смешанных бизнес-документах (Excel, PDF, DOCX)
  • Тестирование мультимодальных и табличных моделей в задачах Multi-Document QA
  • Бенчмаркинг AI-агентов для анализа корпоративной отчетности
Задачи
Вопрос-ответ, Вопросы по таблицам, document question answering
Языки
Английский
Размер
1K–10K записей
Скачиваний за месяц
27,2 тыс.
Лайков
2

Как загрузить

from datasets import load_dataset

ds = load_dataset("hashmortar/spreadsheet-bench-v2-modified")