Дроны и роботы увидят мир в 3D без дополнительных датчиков: камера с ИИ сканирует объекты с точностью до 0,15 мм

01.04.2025 22:55:00 | iXBT.com

Исследователи Нанкинского университета представили технологию, которая позволяет получать детальные 3D-модели объектов с помощью всего одной камеры — без сложных систем из нескольких датчиков или специального освещения. Разработка сочетает оптику с искусственным интеллектом, открывая новые возможности для промышленности, медицины и автономных устройств.

Система SPSIM использует линзу с метаповерхностью — микроскопической структурой, которая разделяет свет на шесть типов поляризации в одном кадре. Это похоже на одновременную съёмку через шесть разных фильтров, но без потери скорости: камера захватывает данные о форме, глубине и текстуре объекта за доли секунды. Точность сканирования достигает 0,15 мм — достаточно, чтобы обнаружить микротрещину на стекле или различить рельеф человеческой кожи.

Сравнение этапов восстановления 3D-моделей: обычные снимки предметов и фигурок (первый ряд), поляризационные данные (второй ряд), эталонные текстуры (третий ряд), результаты традиционного метода (четвёртый ряд) и нейросетевой обработки (пятый ряд). Источник: Boyan Fu

Ключевое отличие от традиционных методов — обработка данных нейросетью. Алгоритм анализирует параметры отражённого света, включая угол поляризации и степень рассеивания, а затем устраняет погрешности, вызванные бликами или гладкими поверхностями. Например, на тестах с прозрачными материалами система восстановила текстуры, которые не фиксируют обычные камеры. Эксперименты также показали, что пропуск круговой поляризации (одного из шести типов) снижает точность на 40% — этот параметр очень важен для работы с матовыми объектами или плавными изгибами.

SPSIM уже превосходит коммерческие аналоги: коэффициент подавления помех соответствует профессиональным поляризационным фильтрам, а эффективность захвата света (65%) позволяет работать при слабом освещении. Система компактна — экспериментальный образец имеет размер 1,65 × 1,65 мм2, что делает возможной интеграцию в портативные устройства.

Практические применения варьируются от контроля качества на производстве до сканирования органов в реальном времени. Технология также решает проблему «слепых зон» в робототехнике: например, автономные автомобили смогут точнее определять форму препятствий даже в сложных погодных условиях.

По оценкам авторов, массовое внедрение SPSIM займёт 3–5 лет. Технология может стать основой для следующего поколения «умных» очков, медицинских зондов и дронов, создающих 3D-карты на лету. Точность, которая раньше требовала лабораторного оборудования, теперь умещается в камере размером с монету.

Подробнее