mistmlm/rvc-models
артефакты RVC v2 для NPU Snapdragon
2 мин чтенияобновлено
Набор артефактов для запуска пайплайна конверсии голоса RVC v2 (Retrieval-based Voice Conversion) на мобильных процессорах Qualcomm Snapdragon. В репозитории собраны скомпилированные графы QNN (Qualcomm Neural Network — формат для нейроускорителей Snapdragon), исходные чекпоинты PyTorch и retrieval-индексы для передачи тембра. Релиз от автора mistmlm рассчитан на интеграцию в Android-приложения (например, rvc-android и beatrice-android) и позволяет выполнять инференс локально на NPU (нейропроцессоре смартфона).
Ключевые особенности
- Ориентирован на чипы Snapdragon 8 Gen 2, 8 Gen 3 и 8 Elite: все пакеты собраны под архитектуру HTP v73 (SM8550) и работают на новых v79 за счёт прямой совместимости.
- Включает общие графы для извлечения признаков и высоты тона (HuBERT c0/r/enc, RMVPE,
conv0_gn) и отдельные пакеты голосов (mygf_zbhy,mygf_wh) с энкодером, декодером иretrieval.index. - Содержит как готовые скомпилированные
.bin-графы с JSON-манифестами тензоров, так и исходные чекпоинты.pthдля воспроизводимой пересборки через QNN SDK.
Что можно сделать
- Интегрировать скомпилированные QNN-графы в собственное Android-приложение для конверсии голоса в реальном времени или офлайн-обработки на устройствах со Snapdragon 8 Gen 2/3/Elite.
- Взять исходные
.pth-чекпоинты из папкиsource/и перекомпилировать графы под другие ревизии чипов (например, v69 для Snapdragon 8 Gen 1) с помощью пайплайнаstage1–stage5из основного репозитория автора.
Пример
hf upload mistmlm/rvc-models models --repo-type model
Подробнее
Совместимость: HTP v73 (Snapdragon 8 Gen 2/3) с прямой поддержкой на v79 (Snapdragon 8 Elite); для v69 (8 Gen 1) требуется полная перекомпиляция.Требования: для запуска в Android нужен рантайм QAIRT (библиотеки
libQnnHtpV73Skel/Stub или V79).Лицензия: скрипты и документация под GPL-3.0-only, веса и голосовые данные сохраняют исходные условия.










Комментарии