К содержимому

Датасет · Hothan

Бенчмарк дуплексного мультимодального взаимодействия в реальном времени

Hothan/Omni-DuplexEval

Набор для оценки потоковых моделей (аудио и текст), решающих, что и когда отвечать.

Что внутри

Компактный бенчмарк (менее 1000 записей), содержащий аудио и текстовые данные для тестирования мультимодальных моделей в потоковом режиме реального времени. Включает два сценария: непрерывное описание происходящего (Real-Time Description) и проактивные напоминания (Proactive Reminder).

Что можно сделать

  • Оценка потоковых голосовых и мультимодальных ассистентов
  • Тестирование способности моделей определять момент вступления в диалог (turn-taking)
Размер
до 1K записей
Скачиваний за месяц
46,6 тыс.
Лайков
3

Как загрузить

from datasets import load_dataset

ds = load_dataset("Hothan/Omni-DuplexEval")