К содержимому

Датасет · allenai

Синтетические вопросы по графикам, таблицам и документам

allenai/pixmo-docs

Синтетический датасет пар «вопрос-ответ» по сгенерированным изображениям документов, таблиц и диаграмм.

Что внутри

Набор данных содержит от 100 тысяч до 1 миллиона пар «вопрос-ответ» по компьютерным изображениям: графикам, таблицам, схемам и документам. Изображения отрендерены из кода, написанного моделью Claude, а вопросы и ответы сгенерированы с помощью GPT-4o mini. Авторы от AllenAI отмечают, что теперь рекомендуют использовать более свежие версии CoSyn-400k и CoSyn-point.

Что можно сделать

  • Обучение мультимодальных моделей (VLM) пониманию графиков и диаграмм
  • Дообучение систем визуального поиска ответов (Visual QA) по документам
Задачи
Вопросы по картинкам
Размер
100K–1M записей
Скачиваний за месяц
6,6 тыс.
Лайков
35

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("allenai/pixmo-docs")