TopoX
реконструкция графа дорожной разметки по видео
2 мин чтенияобновлено
Модель компьютерного зрения для задач автономного вождения: по видео с камер кругового обзора (surround-view) она восстанавливает геометрию полос, их семантику и направленный граф связности дорог. В основе лежит архитектура с бэкбоном ResNet-50, 200 запросами полос (lane queries) и 6 слоями декодера. Главная особенность чекпоинта — явная передача смежности во времени (temporal adjacency propagation): выбранные запросы полос и их подграф направляют обновление узлов на следующем кадре. Пригодится инженерам и исследователям беспилотного транспорта, работающим с онлайн-картографированием (HD-картами) и датасетом OpenLane-V2.
Ключевые особенности
- Пространственно-временная связность: модель использует 66 переносимых запросов (propagated queries), чтобы связывать геометрию и топологию полос между соседними кадрами видео.
- Постобработка GeoDist: поддерживает уточнение итоговой матрицы смежности на основе расстояния между конечными точками сегментов без переобучения весов.
- Компактный формат весов: файл содержит чистый PyTorch
state_dict(932 тензора без состояния оптимизатора), побитово идентичный финальному чекпоинту обучения.
Что можно сделать
- Воспроизвести бенчмарки на валидационной выборке OpenLane-V2 Subset A (150 сцен, 4 806 кадров) в базовой конфигурации или с модулем GeoDist.
- Использовать чекпоинт как базовую точку для экспериментов с онлайн-построением топологии дорог и систем навигации беспилотников.
Пример
hf download y352184741/TopoX topox_r50_openlanev2_subset_a.pth --local-dir checkpoints
bash tools/dist_test.sh 1 checkpoints/topox_r50_openlanev2_subset_a.pth
Подробнее
Метрики OpenLane-V2 Subset A (TopoX): mAP — 39.06%, AP_lane — 37.40%, AP_ped — 40.71%, TOP_lsls — 30.15%.С постобработкой GeoDist показатель TOP_lsls вырастает до 32.10% при сохранении остальных метрик.
Обучение: 12 покадровых эпох (per-frame epochs) и 33 516 потоковых итераций (seed 42).
Для запуска требуются код из репозитория YimingYang23/TopoX и отдельно загруженный датасет OpenLane-V2.










Комментарии