Отечественная разработка на базе нейросети поможет «видеть» незрячим

Отечественная разработка на базе нейросети поможет «видеть» незрячим

23.11.2018     

Российские инженеры представили систему, которая умеет подсказывать слепым людям, какие предметы их окружают. В основе разработки лежит нейросетевой анализ видео и звука.

Гаджет для помощи

СОМСИ – система мультиканальной обработки информации, созданная отечественной компанией «Бизнес Бюро». Устройство собирает, анализирует и представляет в удобной для восприятия человеком форме сведения об окружающих предметах, расстоянии до них, их цвете, форме и т.д. Инженеры рассчитывают, что разработка поможет людям с серьезными нарушениями зрения свободно ориентироваться в пространстве.

СОМСИ состоит из двух модулей. Первая, аппаратная часть системы оснащена широкоформатной камерой и микрофоном. Вторая представляет собой вычислительную платформу, обрабатывающую принимаемые сенсорами данные. По размеру гаджет примерно равен обычному плееру.

Как работает устройство

Принцип действия устройства следующий. Сначала СОМСИ принимает аудиовизуальную информацию со своих датчиков. Затем через интернет система отправляет их на удаленный сервер, где собранная информация обрабатывается нейросетью: распознаются звуковые сигналы, различные объекты. Расстояние до предметов определяется с помощью ультразвука, аналогично современным парковочным датчикам в автомобилях.

После этого пользователь аппарата может принять эти сведения в удобной для себя форме: в виде голосового сообщения, тактильного оповещения или визуального примитива. Последний способ вывода доступен в том случае, если человек пользуется «искусственным глазом» – имплантом, функционирующим подобно сетчатке благодаря нанесенным «пикселям» из фоточувствительного материала. Реалистичную картину такое устройство пока что создать не способно: окружающие объекты представлены схематично, в виде простых геометрических фигур.

Кроме того, СОМСИ способна распознавать звуки: сигналы тревоги, клаксоны автомобилей, звуковые оповещения светофоров. По этой причине гаджет может помочь также людям с нарушением слуха.

Без проблем не обошлось

Вице-президент Всероссийского общества слабовидящих Дмитрий Блюм напомнил, что без предварительного тестирования системы говорить о ее эффективности рано. Сейчас СОМСИ не внесена в утвержденный распоряжением правительства перечень технических средств реабилитации, поэтому далеко не все инвалиды смогут воспользоваться аппаратом. Организация планирует запросить у «Бизнес Бюро» несколько гаджетов для проверки возможностей нейросети.

Впрочем, некоторые недостатки устройства можно заметить уже сейчас. Необходимость постоянного интернет-подключения сильно ограничивает места, где можно использовать СОМСИ. Это негативно сказывается и на стоимости аппарата – чтобы полноценно применять его вне дома, придется приобрести мобильный интернет и смартфон, способный раздавать Wi-Fi. Разработчики в курсе этой проблемы и собираются в будущем модифицировать систему – она сможет проводить простую обработку данных при помощи собственного «железа», без необходимости подключаться к серверу.  

Также СОМСИ пока не способна точно распознавать объекты, если владелец устройства перемещается, уверен директор Культурно-спортивного реабилитационного комплекса общества слепых Владимир Баженов. Причина – слишком низкая скорость реагирования системы на быстро изменяющееся окружение. Разработчики, тем не менее, утверждают, что уже внедрили в гаджет функцию для корректной обработки изображения при быстрой ходьбе.

Пока устройство не обучено, точность распознавания объектов невелика. К примеру, сейчас СОМСИ успешно отличает человека от машины, но определить лицо собеседника или марку авто еще не способно. Авторы проекта уверяют, что по мере накопления данных эффективность нейросетевого зрения возрастет.  



Источник: https://infostart.ru/journal/news/tekhnologii/otechestvennaya-razrabotka-na-baze-neyroseti-pomozhet-videt-nezryachim_949236/
Автор:
Александр Вашкевич Аналитик


Есть ли у вас проблемы со зрением?


Близорукость (53.85%, 7 голосов)
53.85%
Дальнозоркость (0%, 0 голосов)
0%
Астигматизм (7.69%, 1 голосов)
7.69%
Слепота (15.38%, 2 голосов)
15.38%
Другое заболевание (0%, 0 голосов)
0%
У меня идеальное зрение (23.08%, 3 голосов)
23.08%

Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. Hans 1 23.11.18 12:07 Сейчас в теме
Почему нет на инфостарте версии для слабовидящих?
Оставьте свое сообщение

См. также

Apple изменит механизм подтверждения приложений на Mac

Новость Mac OS ИТ-новость

Разработчики Apple решили пересмотреть подход к подтверждению надежности приложений для macOS. Существующий механизм после выпуска macOS Big Sur привел к глобальным сбоям.

27.11.2020    835    user1015646    0       

Частота получена: Apple начнет тестировать в России скоростной аналог Bluetooth

Новость iOS ИТ-новость Мобильные приложения

В последних версиях iPhone Apple добавила технологию быстрой передачи данных через аналог Bluetooth. В России особенность американских смартфонов не работает, потому что компания не имеет права использовать подходящую частоту.

27.11.2020    893    VKuser24342747    0       

Internet Archive спасёт Flash от забвения

Новость Интернет ИТ-новость

Internet Archive – некоммерческая цифровая библиотека, в преддверии запланированного прекращения поддержки Flash в конце 2020 года объявила, что сохранит Flash-анимацию и игры. Архив будет использовать эмулятор Ruffle.

26.11.2020    1416    SKravchenko    3       

Браузеры для Windows 7 смогут прожить дольше из-за коронавируса

Новость Windows Интернет ИТ-новость Новости компаний

Браузеры Google Chrome и Microsoft Edge будут получать обновления для версий под Windows 7 и в 2021 году. Компании объявили, что смещают сроки прекращения выпуска новых патчей.

26.11.2020    1068    VKuser24342747    0       

Минцифры выпустило приложение для отслеживания контактов с заболевшими коронавирусом

Новость Безопасность ИТ-новость Минкомсвязь Мобильные приложения

Министерство цифрового развития России завершило работу над приложением «Госуслуги.COVID трекер». Оно будет оповещать о контактах с людьми, которые заболели Covid-19 – это поможет остановить распространение вируса.

25.11.2020    2366    user1015646    3       

Сколтех показал полностью российскую рабочую станцию 5G

Новость Импортозамещение ИТ-новость Стартапы Телекоммуникации

Сколковский институт науки и технологий презентовал прототип первой российской станции для мобильного интернета пятого поколения. Устройство поддерживает основные рабочие диапазоны 5G. Массовое внедрение начнется в 2023 году.

25.11.2020    2378    VKuser24342747    2       

Microsoft готовит Office для Mac на базе Big Sur и M1

Новость Mac OS ИТ-новость Новости компаний

Через день после того, как Apple представила новые компьютеры на собственной микросхеме, Microsoft выпустила новый Office для Mac, который будет работать на новом оборудовании.

25.11.2020    1378    SKravchenko    0       

Крупное обновление: Chrome 87 стал в пять раз меньше нагружать процессор

Новость Google Интернет ИТ-новость

Разработчики Google представили новую версию самого популярного браузера в мире. Он загружается на 25% быстрее предшественника и в пять раз меньше нагружает ресурсы процессора.

25.11.2020    1545    user1015646    0       

Браузеры на Chromium начнут блокировать JavaScript-код при запуске новых вкладок

Новость Google Безопасность Интернет ИТ-новость

Браузер Google Chrome по умолчанию не будет поддерживать JavaScript-редирект при открытии ссылок в новой вкладке. Обновление безопасности затронет все приложения на базе движка Chromium.

24.11.2020    1708    VKuser24342747    0       

Старые Android-устройства перестанут открывать до 30% сайтов

Новость Безопасность Интернет ИТ-новость Мобильные приложения

Миллионы сайтов в 2021 году станут недоступны на устаревших Android-устройствах. Все дело в корневых сертификатах безопасности DST Root X1: организация Let's Encrypt перестанет их подписывать.

23.11.2020    1564    user1015646    3       

Евросоюз запретит сквозное шифрование в мессенджерах

Новость Безопасность ИТ-новость

Совет министров Евросоюза (ЕС) максимально приблизился к запрету сквозного шифрования в мессенджерах. Причина – серия терактов в европейских городах: власти ЕС утверждают, что атаки координировали через мессенджеры со сквозным шифрованием.

20.11.2020    1740    user1015646    39       

Huawei продает бренд Honor

Новость ИТ-новость Мобильные приложения Новости компаний

Китайская компания Huawei решила продать свой суббренд Honor. Это должно помочь ей выжить на фоне санкций, введенных властями США.

20.11.2020    2241    user1015646    0       

Microsoft представила новый Linux: CBL-Mariner

Новость Linux ИТ-новость Новости компаний

Группа Microsoft Linux Systems недавно выпустила новый дистрибутив Linux: CBL-Mariner. Дистрибутив является частью инфраструктуры Azure, используемой для пограничных сетевых служб.

20.11.2020    1466    SKravchenko    2       

Apple впервые представила ноутбуки на собственных процессорах

Новость Mac OS ИТ-новость

Компания Apple выпустила первые ноутбуки на собственных чипах Apple Silicon M1. В синтетических тестах они обогнали Intel, которые использовались ранее. Но эксперты обнаружили, что с М1 не все так однозначно.

19.11.2020    2409    user1015646    0       

Microsoft представила .NET 5 с поддержкой Linux и WebAssembly

Новость ИТ-новость Языки программирования

10 ноября Microsoft представила новый выпуск платформы .NET 5 с поддержкой Linux, macOS и WebAssembly. Это следующий крупный выпуск .NET Core после 3.1.

19.11.2020    2811    SKravchenko    3       

Безопасность и командная работа: вышел релиз GitLab 13.5

Новость git ИТ-новость Новости компаний

Репозиторий GitLab получил обновление до версии 13.5. В новом релизе разработчики сконцентрировались на безопасности мобильных приложений и совместной работе, добавили вики-страницы для групп.

19.11.2020    2466    VKuser24342747    0       

Xiaomi представила собственную платформу для устройств интернета вещей

Новость ИТ-новость Новости компаний Робототехника

Интернет вещей называют главным вектором роста глобальной сети. Чтобы обеспечить эффективное взаимодействие внутри экосистемы умных устройств, китайский гигант Xiaomi разработал собственную платформу интернета вещей – Xiaomi Vela.

18.11.2020    2329    user1015646    0       

Холодное хранение: Совет Федерации предложил построить дата-центры в Арктике

Новость Дата-центры ИТ-новость

Правительство рассмотрит идею размещения вычислительных центров в российской Арктике. ЦОДы должны обеспечить ИТ-инфраструктурой северные регионы страны.

18.11.2020    1895    VKuser24342747    1       

Создатель Python присоединился к Microsoft

Новость ИТ-новость Новости компаний Языки программирования

Разработчик языка Python Гвидо ван Россум пришел в компанию Microsoft. Год назад создатель одного из самых популярных языков в мире ушел на пенсию, но решил вернуться в «большой спорт».

18.11.2020    2387    user1015646    1       

Apple запретила владельцам устройств с iOS пользоваться эмуляторами терминала

Новость iOS Безопасность Интернет ИТ-новость Мобильные приложения

Разработчики двух популярных iOS-приложений для эмуляции Linux терминала рассказали, что их программы могут быть удалены из App Store. В Apple заявили, что санкции связаны с возможностью скачивать код через команду wget.

17.11.2020    1836    VKuser24342747    0       

Как будет выглядеть облачная безопасность через 3 года

Новость Безопасность ИТ-новость Облачные технологии

Облачная безопасность уже несколько лет превосходит по актуальности локальную безопасность. Повышенная автоматизация и функциональная совместимость укрепят эти позиции.

17.11.2020    2019    SKravchenko    0       

«Роскосмос» запустит собственный Starlink за 1,5 трлн рублей

Новость Импортозамещение Интернет ИТ-новость Телекоммуникации

Госкорпорация «Роскосмос» намерена создать многофункциональную спутниковую систему «Сфера». Основное ее назначение – высокоскоростной доступ к интернету в любой точке земного шара, как и у проекта Starlink от компании SpaceX Илона Маска.

17.11.2020    1684    user1015646    8       

Россия занялась созданием межконтинентального канала квантовой связи

Новость ИТ-новость Телекоммуникации

Российские ученые совместно со специалистами из Китая, Индии и ЮАР работают над проектом по созданию первого в мире межконтинентального канала квантовой связи. Его протяженность составляет более 10 тыс. км.

16.11.2020    1932    user-programmist    0       

Разработчиков приложений для Apple заставят отчитаться перед пользователями

Новость iOS ИТ-новость Мобильные приложения

Компания Apple вводит новые правила для разработчиков приложений для своих операционных систем. Теперь в приложениях iOS и iPadOS нужно будет четко указывать, какую информацию о пользователях они собирают.

16.11.2020    1707    user1015646    1