Датасет · Hothan
Бенчмарк дуплексного мультимодального взаимодействия в реальном времени
Hothan/Omni-DuplexEval
Набор для оценки потоковых моделей (аудио и текст), решающих, что и когда отвечать.
Что внутри
Компактный бенчмарк (менее 1000 записей), содержащий аудио и текстовые данные для тестирования мультимодальных моделей в потоковом режиме реального времени. Включает два сценария: непрерывное описание происходящего (Real-Time Description) и проактивные напоминания (Proactive Reminder).
Что можно сделать
- Оценка потоковых голосовых и мультимодальных ассистентов
- Тестирование способности моделей определять момент вступления в диалог (turn-taking)
- Размер
- до 1K записей
- Скачиваний за месяц
- 46,6 тыс.
- Лайков
- 3
Как загрузить
from datasets import load_dataset
ds = load_dataset("Hothan/Omni-DuplexEval")