Vesuvius ink 9 µm
перенос между сканами для невидимых свитков
2 min readupdated
Это набор чекпоинтов для детекции чернил на КТ-сканах свитков Геркуланума. На выходе — TIFF с картой чернил, полученный из нативного скана 8.6–9.4 µm. Основа — flat 9 µm рецепт из ScrollPrize/villa (конфиг aligned21_hybrid_3d2d), от TequilaYuen. Добавлены scan-type transfer и self-training: модель адаптируется к нативному скану и к целевому свитку через pseudo-labels. Пригодится исследователям Vesuvius Challenge и digital humanities, которым нужно читать невидимые свитки.
Ключевые особенности
- Работает с нативными КТ 8.6–9.4 µm, а не только с pooled-рендерами.
- Scan-type transfer: kernel pooled→native обучен на сегменте PHerc 0814, held-out R² 0.740 против 0.623 у простого ресемплинга.
- Self-training на pseudo-labels целевого свитка:
selftrain_safer_seed42даёт 0.804 plain и 0.813 mirror TTA ROC-AUC на PHerc 0139. - Есть production-чекпоинты, обученные на четырёх размеченных свитках (1667, Paris 4, 0814, 0139), seeds 42 и 43.
- В комплекте
.pth, конфиги, kernel и affine-трансформ; инференс — одной командой.
Что можно сделать
- Прогнать свой surface volume через
vesuvius.ink_detection.inference.inferи получить TIFF с картой чернил. - Сравнить base, scan_transfer и self-training на своём held-out свитке по ROC-AUC.
- Использовать production-веса для инференса на неразобранных свитках.
- Собрать pseudo-labels для нового свитка по конфигу
loso0139_selftrain_safer.jsonи адаптировать модель.
Пример
python -m vesuvius.ink_detection.inference.infer SURFACE_VOLUME.zarr CKPT.pth OUT.tif --direction both --tta-mirror
Подробнее
ROC-AUC на PHerc 0139: 0.804 plain / 0.813 mirror TTA уselftrain_safer_seed42; 0.835 на pooled.Split-тест на w039 и w041: 0.770 и 0.841 с mirror TTA.
Обучение: 25k шагов, batch 64, на PHerc 1667, Paris 4 и 0814.
Лицензия CC BY-NC 4.0; affine для PHerc 0846A — не официальный.










Comments