Инженеры MIT научили обычный iPhone видеть объекты за углом

Сенсоры LiDAR в современных iPhone и iPad оказались способны фиксировать предметы, скрытые от прямого обзора. Исследователи из MIT Media Lab адаптировали технологию NLOS-визуализации, ранее требовавшую дорогостоящего лабораторного оборудования, для работы на серийных смартфонах. Теперь мобильное устройство может отслеживать движение и форму объектов, находящихся за стенами или препятствиями.

Разработка опирается на метод «апертурного сэмплирования под действием движения». В процессе перемещения смартфона система собирает серию отраженных сигналов, которые алгоритм объединяет в динамическую трехмерную модель. Это напоминает эхолокацию летучих мышей: устройство вычисляет скорость, траекторию и очертания скрытого объекта, даже если тот не попадает в объектив камеры.

Сиддхарт Сомасундарам и его коллеги успешно протестировали систему в четырех сценариях, включая одновременное отслеживание нескольких целей и самолокализацию в пространстве. Подобные алгоритмы способны радикально повысить безопасность беспилотного транспорта, позволяя автопилотам заранее распознавать пешеходов или препятствия за слепыми поворотами.

Пока технология остается экспериментальной. Apple ограничивает сторонним разработчикам доступ к «сырым» данным с LiDAR-матрицы из соображений безопасности. Тем не менее исследователи опубликовали исходный код проекта, а стоимость необходимых для создания аналогичного сенсора компонентов составляет менее 100 долларов.