Команда разработчиков из Университета Пенсильвании, Исследовательской лаборатории армии США и Нью-Йоркского университета представила очки для управления дронами.
Очки оснащены Tobii Pro Glasses 2 — системой отслеживания глаз, которая включает в себя HD-камеру и инерциальный измерительный модуль, который определяет положение головы человека по отношению к дрону. С помощью глубокой нейронной сети система вычисляет точку, куда нужно направляться одному или сразу нескольким коптерам.
Tobii Pro Glasses 2 подключена к портативному процессору NVIDIA Jetson TX2. Система автономна и не полагается на внешние датчики.
По словам создателей, разработка работает неидеально: чтобы вычислить точку 3D-навигации, она использует 2D-координату, а затем случайным образом выбирает глубину точки в пределах заранее определенной зоны безопасности.
В будущем разработчики планируют добавить голосовой режим и режим жестов, попутно отрегулировав глубину 3D-навигации.
Исследователи надеются, что их технология поможет людям с ограниченными возможностями безопасно управлять дронами.