Датасет · nvidia
VLM-датасет Nemotron v2
nvidia/Nemotron-VLM-Dataset-v2
Почти втрое больше высококачественных примеров, чем в v1, для обучения VLM вопросам по изображениям и видео.
Что внутри
Карточка продолжает Llama Nemotron VLM Dataset V1 с 3 млн сэмплов; v2 содержит почти в три раза больше высококачественных сэмплов. Основной фокус — три направления, но в доступном фрагменте они не перечислены. В метаданных указаны задачи visual-question-answering, image-text-to-text и video-text-to-text; модальность — text. Язык и формат в карточке не указаны.
Что можно сделать
- Дообучение VLM для ответов на вопросы по изображениям
- SFT мультимодальной модели для image-text-to-text
- Проверка или дообучение на video-text-to-text
- Задачи
- Вопросы по картинкам, Картинка + текст, Видео + текст
- Размер
- 1M–10M записей
- Скачиваний за месяц
- 11,7 тыс.
- Лайков
- 98
Как загрузить
from datasets import load_dataset
ds = load_dataset("nvidia/Nemotron-VLM-Dataset-v2")