Исследователи из MIT Media Lab обнаружили поистине поразительное применение датчику LiDAR, встроенному в ваши iPhone и iPad Pro. Он способен обнаруживать и отслеживать объекты, которые находятся полностью за пределами поля зрения камеры. Да, это означает возможность видеть за углами.
Такой вид визуализации, называемый визуализацией без прямой видимости (NLOS), не является новой концепцией. Однако предыдущие демонстрации опирались на мощные и дорогостоящие лабораторные лазеры, которые практически не находили применения в реальной жизни.
Что делает это исследование столь интересным, так это то, что команда MIT добилась успеха, используя тот же самый маломощный датчик LiDAR, который уже встроен в наши смартфоны.
Как это работает?
Команда использует датчик LiDAR, чтобы мы могли видеть за углами объекты, которые не находятся непосредственно в поле нашего зрения. Секрет заключается в движении. По мере движения вашего устройства система одновременно отслеживает форму объекта, его положение и положение камеры во времени.
Команда называет это «моделью дискретизации апертуры», и по сути она объединяет серию зашумленных, несовершенных измерений в нечто осмысленное. Результатом не являются чёткие фотографии того, что скрывается за углом. Вместо этого вы получаете всё более подробные выводы. Система может сказать вам, что там что-то есть, как это движется и какую форму это примерно имеет. Представьте себе это как эхолокацию, но с использованием света.
На что она на самом деле способна?
Команда продемонстрировала четыре конкретные возможности: отслеживание одного объекта, реконструкция его формы, одновременное отслеживание нескольких объектов и нечто особенно интересное для робототехники — самолокализация камеры с использованием скрытых ориентиров.
Последнее — это очень важно. Робот или автономная система, способная ориентироваться с помощью объектов, которые она не может видеть напрямую, имеет огромное преимущество в реальном мире. Это также может помочь улучшить технологии автономного вождения или дронов-доставщиков, например, для предотвращения аварий.
«К сожалению, вы пока не можете попробовать это на своём смартфоне, так как для этого компаниям пришлось бы обнародовать свои исходные данные, чего они часто не делают»
— отметил Сиддхарт Сомасундарам, один из исследователей, работающих над этим проектом
Тем не менее, исследователи сделали свой код общедоступным, а аппаратное обеспечение датчика можно собрать менее чем за 50 долларов.
Комментарии (0)