Датасет · TencentARC
Бенчмарк генерации кода по графикам для MLLM
TencentARC/Plot2Code
Набор изображений графиков и текстов на английском для оценки того, как мультимодальные модели пишут код.
Что внутри
Бенчмарк от Tencent ARC Lab содержит менее 1000 примеров с изображениями и текстами на английском языке. Он создан для комплексной проверки мультимодальных языковых моделей (MLLM) в задачах визуального программирования — умении генерировать код по картинке графика.
Что можно сделать
- Оценка способности мультимодальных моделей восстанавливать код построения графиков по изображению
- Сравнение качества визуального программирования у разных VLM и MLLM
- Задачи
- Генерация текста, Текст → картинка, Картинка → текст, Картинка → картинка
- Языки
- Английский
- Размер
- до 1K записей
- Скачиваний за месяц
- 3,1 тыс.
- Лайков
- 36
Как загрузить
from datasets import load_dataset
ds = load_dataset("TencentARC/Plot2Code")