Датасет · jmhessel
Бенчмарк понимания юмора New Yorker
jmhessel/newyorker_caption_contest
Картинки и подписи из конкурса New Yorker для проверки понимания юмора моделями.
Что внутри
Данные из конкурса подписей The New Yorker: изображения и текстовые варианты подписей на английском, от 100 тыс. до 1 млн примеров. Задачи включают image-to-text, multiple-choice, классификацию и генерацию текста, VQA. Это бенчмарки из работы «Do Androids Laugh at Electric Sheep?»; подробности на capcon.dev.
Что можно сделать
- Оценивать понимание юмора мультимодальных моделей
- Тренировать выбор смешной подписи к картинке
- Тестировать генерацию подписей
- Задачи
- Картинка → текст, multiple choice, Классификация текста, Генерация текста, Вопросы по картинкам, Другое
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 13,1 тыс.
- Лайков
- 78
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("jmhessel/newyorker_caption_contest")