Лидар, сонар и компьютерное зрение: Новая российская разработка придет на помощь слабовидящим и незрячим

Новая российская разработка — прибор «ЛИСА» — использует три сенсорных канала и алгоритмы искусственного интеллекта для пространственной ориентации людей с серьезными нарушениями зрения. Компактный носимый гаджет не занимает рук и предупреждает о препятствиях с помощью тактильных и голосовых сигналов. Подробности и иностранные аналоги — в нашем материале:

Ульяновское конструкторское бюро приборостроения (УКБП концерна КРЭТ) ведет разработку носимой ассистивной системы «ЛИСА», предназначенной для пространственной ориентации людей с полной потерей или серьезным нарушением зрения. Устройство сочетает в себе три независимых канала сбора информации об окружающей обстановке: лидарное сканирование, сонарное зондирование и видеосъемку. Лидар обеспечивает построение трехмерной карты пространства с помощью световых импульсов, сонар определяет наличие препятствий на основе звуковых волн, а видеокамера фиксирует визуальную информацию. Данные с трех сенсорных систем объединяются и обрабатываются алгоритмами системы с элементами искусственного интеллекта, что позволяет детектировать даже мелкие и тонкие препятствия — ветки, провода, тросы — и заранее предупреждать пользователя о их присутствии. Встроенная камера в сочетании с алгоритмами компьютерного зрения обеспечивает распознавание текстов, дорожных и навигационных знаков, а также лиц. Информация о препятствиях и объектах на пути передается пользователю через тактильную вибрацию, звуковые сигналы и голосовые подсказки. Устройство выполнено в формате компактного носимого гаджета, не занимающего руки.



Схожие разработки сегодня ведутся за рубежом. Так, устройство NOA (Швейцария) представляет собой жилет, оснащенный тремя камерами Intel RealSense, обеспечивающими синхронный захват глубины и RGB-изображений с полем обзора 90° по вертикали и 170° по горизонтали в диапазоне от 0,3 до 10 метров. NOA обеспечивает обнаружение препятствий, GPS-навигацию с пошаговыми маршрутами и функцию поиска объектов на основе генеративного ИИ. Система .Lumen (Румыния) выполнена в форм-факторе гарнитуры с шестью камерами, двумя инфракрасными лазерными проекторами для работы в темноте, тремя инерциальными измерительными модулями и GPS. Устройство распознает наземные и надземные препятствия, лестницы, двери, автобусные остановки, а также лужи и снег. Очки Ally Solos от компании Envision (Нидерланды, США) построены на платформе Solos AirGo, оснащены камерой и используют комбинацию фундаментальных ИИ-моделей, включая Llama, ChatGPT, Gemini и Perplexity, для распознавания текста, объектов, лиц и описания окружения через голосовое взаимодействие. Смарт-трость WeWalk Smart Cane 2 (Турция) оснащена ультразвуковым датчиком временипролетного типа для обнаружения препятствий на уровне головы и груди с дальностью от 30 см до 9 м, а также обеспечивает голосовую навигацию и вибрационную обратную связь. Браслет Sunu Band (Мексика, США) использует сонарный датчик для обнаружения объектов на расстоянии до 5,5 м с передачей информации через тактильную вибрацию. Платформа Aira (США) предоставляет доступ к удаленным визуальным интерпретаторам через смартфон.

В отличие от многих зарубежных аналогов, ориентированных на один-два сенсорных канала, новая российская «ЛИСА» объединяет лидар, сонар и видеокамеру в едином носимом устройстве, что потенциально обеспечивает высокую надежность и полноту восприятия среды. Разработка получила одобрение Всероссийского общества слепых. В настоящее время проект находится в активной фазе: сформирован технический облик системы и определен ключевой функционал, следующий этап — превращение макетных образцов в законченный продукт, пригодный для повседневного использования.

Михаил Петровский

Источник: salt.mediasalt.ru

уникальные шаблоны и модули для dle