Датасет · allenai
Синтетические вопросы по графикам, таблицам и документам
allenai/pixmo-docs
Синтетический датасет пар «вопрос-ответ» по сгенерированным изображениям документов, таблиц и диаграмм.
Что внутри
Набор данных содержит от 100 тысяч до 1 миллиона пар «вопрос-ответ» по компьютерным изображениям: графикам, таблицам, схемам и документам. Изображения отрендерены из кода, написанного моделью Claude, а вопросы и ответы сгенерированы с помощью GPT-4o mini. Авторы от AllenAI отмечают, что теперь рекомендуют использовать более свежие версии CoSyn-400k и CoSyn-point.
Что можно сделать
- Обучение мультимодальных моделей (VLM) пониманию графиков и диаграмм
- Дообучение систем визуального поиска ответов (Visual QA) по документам
- Задачи
- Вопросы по картинкам
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 6,6 тыс.
- Лайков
- 35
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("allenai/pixmo-docs")