Система синхронизирует записи, сделанные со смартфонов, и воссоздает место атаки, определяя положение каждого снимающего. Затем она переходит к анализу аудиодорожек из каждого ролика. Нейросетка ориентируется на шум пули и звук самого выстрела — задержка между ними позволяет рассчитать положение стрелка. Дополнительная фича — она может по звуку выяснить тип использованного оружия.
Нейросетку протестировали на записях с теракта в Лас-Вегасе 2017 года — она быстро сообразила, что стрелок находился в отеле, и даже указала, в какой именно части здания.
Источник: Carnegie Mellon University