Материал подготовлен автоматически по первоисточникам: ссылки на них — в конце статьи.
Точность прогнозов движения судов оказалась сильно зависима от того, как данные делят для обучения и проверки. В препринте Chabahar Maritime University, который не прошёл рецензирование и содержит собственные замеры авторов, при переносе теста в отдельный регион ошибка TrAISformer через час выросла с 2,2 до 24,6 км. При выборе архитектуры сначала стоит проверить протокол: иначе улучшение может принадлежать тесту, а не модели.
Работа разбирает прогнозы по AIS — системе, через которую суда передают координаты, скорость и курс. Данные разделили тремя способами: исключили пересечение по судам, времени или регионам, а затем проверили TrAISformer, GATransformer и контролируемые реконструкции AISFormer и MGFormer.
Способ расчёта метрики дал сопоставимый эффект. Когда TrAISformer строил 16 вариантов маршрута, а для отчёта выбирался ближайший к уже известному реальному пути, ошибка снижалась в 2,1–3,2 раза относительно единственного прогноза. Такой результат показывает покрытие возможных траекторий, но не описывает точность одного решения, которое система выдаст в эксплуатации.
Пересечение судов между обучающей и тестовой частями снизило ошибку TrAISformer на 23–25%. Компактный кодировщик выиграл от того же пересечения не более 2%, поэтому утечка зависит не только от набора данных, но и от модели. При региональном разделении 99,9% тестовых контекстов попали в диапазоны долготы, которых TrAISformer не видел при обучении: представление абсолютных координат перестало переноситься на новую территорию. Графовое внимание GATransformer измеримого выигрыша не дало.
Проверка охватила по месяцу AIS-трафика из датских вод и района Houston–Galveston; модели работали на регулярной сетке с шагом десять минут. Для регионального теста в каждом корпусе использовали один разрез по долготе, а AISFormer и MGFormer восстанавливали по неполным описаниям исходных методов. Выводы поэтому относятся к этим реализациям, географиям и протоколу, а не задают общий рейтинг архитектур.
Источники
Иллюстрация: рисунок из статьи «Protocol before progress: leakage-aware evaluation of AIS trajectory prediction», Zobeir Raisi, Vali Mohammad Nazarzehi Had, CC BY 4.0
Похоже на вашу задачу?
Расскажите, что собираете. За полчаса разложим на этапы и назовём сроки — это бесплатно и ни к чему не обязывает.
