Інженери з Австралії та Іраку навчили звичайний дрон з камерою відрізняти людей від мертвих. Система аналізує кадри з камери, визначає на них область з грудьми і за періодичними змінами яскравості розпізнає рухи, викликані диханням. Стаття опублікована в журналі.
Основна користь від дронів полягає в можливості оглянути місцевість або будівлі з великої висоти. Зазвичай це використовують для фото- або відеозйомки, але у дронів є й інше серйозне застосування - пошук зниклих людей.
При розробці дронів для рятувальних операцій інженери стикаються з двома технічними труднощами. Перша з них полягає в складності виявлення людини при зйомці з великої висоти. Друга проблема пов'язана з першою і полягає в тому, що навіть якщо на кадрах видно силует людини, в деяких випадках, наприклад, при стихійних лихах з великою кількістю жертв, рятувальникам необхідно вміти відокремити живих людей від мертвих, щоб сконцентрувати зусилля на тих, кому ще можна допомогти. Зазвичай як вирішення обох проблем на дрон встановлюють інфрачервону камеру, але, наприклад, у спекотних країнах контраст між температурою тіла і навколишнього середовища може бути невеликим.
Група інженерів з Іраку та Австралії під керівництвом Джаваана Чала (Javaan Chahl) з Університету Південної Австралії використовувала у своїй розробці інший принцип - розпізнавання дихання за даними з екшн-камери, закріпленої через підвіс на квадрокоптері. Головне нововведення в роботі - не апаратна частина, а алгоритм для розпізнавання дихання.
Алгоритм отримує кадри з камери і витягує з них яскраву складову. Потім підготовлений кадр обробляється алгоритмом OpenPose, який розпізнає людину в кадрі і розмічає на ньому ключові точки, що відповідають певним частинам тіла. На підставі цих даних алгоритм визначає область знімків, в якій розташовані груди людини. Після цього програма аналізує яскравість цієї області на безлічі кадрів з відео і розпізнає її періодичні зміни, якщо на відео знаходиться жива і дихаюча людина.
У нинішньому вигляді система працює не в реальному часі і дані, записані камерою на дроні, аналізуються на комп'ютері після його посадки. Розробники провели експеримент, під час якого вони знімали з дрона odin манекен і вісім осіб, що лежать у чотирьох різних позах. Алгоритму вдалося коректно класифікувати, чи жива людина в кадрі, у всіх випадках.
Найбільший виробник дронів DJI веде статистику життів, врятованих за допомогою дронів. У середині 2018 року компанія опублікувала свій другий звіт і заявила, що за рік дрони врятували 65 осіб, а станом на жовтень 2019 року компанія оцінює загальне число за всі роки в 279 осіб.