К содержимому

Датасет · aoiandroid

Мультиязычный архив статей и транскриптов Android Times

aoiandroid/android-times-articles

Синтезированные и обработанные статьи с метаданными на 5 языках для задач генерации, перевода и саммаризации текста.

Что внутри

В репозитории собрано от 1000 до 10 000 записей, представляющих собой архив статей, скриптов, метаданных и редакционных материалов издания Android Times. Материалы сгенерированы и обработаны, а затем структурированы по языковым локалям, включая английский (США, Австралия, Китай), японский, китайский, хинди и испанский. Поддерживаются текстовая и визуальная модальности.

Что можно сделать

  • Обучение и проверка моделей машинного перевода и локализации текстов на 5 языков
  • Файнтюнинг LLM (SFT) для генерации и краткого пересказа (summarization) новостных статей
Задачи
Генерация текста, Суммаризация, Перевод
Языки
Английский, Японский, Китайский, Хинди, Испанский
Размер
1K–10K записей
Скачиваний за месяц
213,9 тыс.
Лайков
1

Как загрузить

from datasets import load_dataset

ds = load_dataset("aoiandroid/android-times-articles")