К содержимому

Датасет · PeacefulData

Пространственное аудио и вопросы по бытовым сценам

PeacefulData/RMS-AQA

Бенчмарк на английском языке для оценки понимания пространственного звука и многошаговых рассуждений.

Что внутри

Датасет представляет собой бенчмарк для пространственного audio question answering (SAQA) в реальных домашних условиях. Внутри лежат 10-секундные аудиозаписи в формате First-Order Ambisonics (FOA), собранные в среде умного дома, и вопросы на английском языке. Задача разделена на два этапа: сначала привязка слышимых звуковых событий в сцене, затем ответ на вопрос.

Что можно сделать

  • Оценка аудио-языковых моделей на понимание пространственного звука
  • Обучение систем для умного дома распознавать и связывать бытовые звуки
  • Тестирование многошаговых рассуждений (multi-hop QA) по аудиоданным
Задачи
Вопрос-ответ
Языки
Английский
Скачиваний за месяц
9,9 тыс.
Лайков
15
Доступ
по запросу на Hugging Face

Как загрузить

from datasets import load_dataset

ds = load_dataset("PeacefulData/RMS-AQA")