Там особые алгоритмы машинного обучения распознают позы людей, которые свойственны для насильственных действий.
Летающих дронов обучили распознавать враждебных людей в толпе, а как это происходит показали на видео, которое было размещено в сети интернет. По утверждению учёных, система работает с точностью до 94%.
Система содержит в себе обыденный квадрокоптер Parrot AR, который транслирует изображение с камеры на облачный сервер через мобильный интернет. Он упал до 79% при нахождении в поле зрения камеры 10 человек.
Ученые показали нейросети сотни видеозаписей, на которых были запечатлены массовые беспорядки. Видео поступает в нейросети FPN, где запускается механизм определения людей на кадрах. В итоге средняя точность распознавания насилия оказалась сравнима с наземными аналогами — 88,8 процента. Потом обработанная информация поступает на проверку свероточной нейросети, и на заключительном этапе начинает действовать специальный метод, сверяющий всю информацию с изображениями в датасете. Для этого нейросеть делает упрощенную модель скелета и сравнивает положение частей тела с угрожающими позами. Они создали нейросеть, которая распознает злоумышленников на фотографиях.