К содержимому

Датасет · OpenGVLab

Датасет для обучения агентов работе с графическим интерфейсом

OpenGVLab/GUI-Odyssey

Англоязычный набор данных со скриншотами, текстами и табличными данными от OpenGVLab для навигации в GUI.

Что внутри

Набор включает изображения экранов, текстовые и табличные данные на английском языке, собранные командой OpenGVLab. Объем этой версии составляет от 1 до 10 тысяч записей, при этом авторы в карточке предупреждают о выходе обновленной версии репозитория. Датасет сопровождается научной статьей и открытым кодом на GitHub.

Что можно сделать

  • Обучение мультимодальных UI-агентов для автоматизации действий на экране
  • Тренировка VLM распознавать элементы интерфейса и выполнять пользовательские сценарии
  • Оценка моделей навигации в приложениях (лучше использовать обновленную версию из ссылки в карточке)
Языки
Английский
Размер
1K–10K записей
Скачиваний за месяц
67 тыс.
Лайков
26

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("OpenGVLab/GUI-Odyssey")