Датасет · BAAI
Десятки миллионов мультимодальных инструкций
BAAI/Infinity-MM
Крупный мультимодальный instruction dataset от BAAI: изображения с вопросами и ответами на английском и китайском.
Что внутри
Infinity-MM — крупномасштабный мультимодальный instruction dataset от BAAI. В нём десятки миллионов примеров; данные прошли фильтрацию качества и дедупликацию. Синтетические данные генерировали на основе открытых моделей и системы разметки, используя подробные аннотации изображений и разнообразные вопросы. Языки — английский и китайский.
Что можно сделать
- Обучить VLM по изображениям и инструкциям
- Дообучить image-to-text модель
- Проверить мультимодальную модель на en/zh
- Задачи
- Картинка → текст
- Языки
- Английский, Китайский
- Размер
- 10M–100M записей
- Скачиваний за месяц
- 11,9 тыс.
- Лайков
- 120
- Доступ
- по запросу на Hugging Face
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("BAAI/Infinity-MM")