ClinSeek-35B-A3B arm S

Это полнопараметрический файнтюн Qwen/Qwen3.5-35B-A3B (35,95B, MoE) от Letian2003 для агентного поиска по EHR. Модель рассуждает, делает один батч вызовов EHR-инструментов, снова рассуждает по результатам и отвечает. Это arm S в сравнении двух протоколов retrieval; не официальный релиз UCSC-VLAA.

▶ Ключевые особенности

• ➖ Обучена на 2 472 single-pass retrieval траекториях (49 для validation) из train-сплита AgentEHR-Bench.
• ➖ Шесть семейств задач: диагнозы и процедуры (CCS), лабораторные и микробиологические тесты, назначения, переводы.
• ➖ Полный SFT по рецепту ClinSeekAgent: 8 × H200, 3 эпохи; опубликован чекпойнт конца 2-й эпохи (global_step_154).
• ➖ Текстовая тренировка: vision tower фактически остался от базовой модели; MTP-голова скопирована без обучения.
• ➖ Веса — производная MIMIC-IV, только research use по PhysioNet DUA; траектории не опубликованы.

➕ Пример

vllm serve Letian2003/ClinSeek-35B-A3B-armS-singlepass-ep2 \
  --reasoning-parser qwen3 \
  --enable-auto-tool-choice \
  --tool-call-parser qwen3_coder

Подробнее

Бенчмарков в релизе нет — модель не оценена. Val loss на шаге 150: 0.2663; на шаге 154 не указан.
Чекпойнт: 14 safetensors-шардов, 71.9 ГБ, bf16. Для запуска нужен ClinSeekAgent tool loop; обучение шло на 8 × H200.
Ограничения: только семейства AgentEHR-Bench, text-only, не медицинское изделие. Не использовать для диагностики, лечения или triage.