УДК 004.93’11
МУЛЬТИМОДАЛЬНАЯ СИСТЕМА ДЛЯ АУДИОВИЗУАЛЬНОЙ ПОДДЕРЖКИ ПРИНЯТИЯ РЕШЕНИЙ ПОЛЬЗОВАТЕЛЯМИ С НАРУШЕНИЕМ ЗРЕНИЯ
И. П. Бурукина, к.т.н., доцент, заведующий кафедрой САПР ПГУ, Пенза, Россия;
orcid.org/0009-0006-1953-2914, e-mail: Этот адрес электронной почты защищён от спам-ботов. У вас должен быть включен JavaScript для просмотра.
Г. О. Фельдман, бакалавр ПГУ, Пенза, Россия;
e-mail: Этот адрес электронной почты защищён от спам-ботов. У вас должен быть включен JavaScript для просмотра.
Д. А. Гришаев, бакалавр ПГУ, Пенза, Россия;
e-mail: Этот адрес электронной почты защищён от спам-ботов. У вас должен быть включен JavaScript для просмотра.
Работа посвящена решению проблемы пространственной ориентации лиц с нарушением зрения. Цель исследования заключается в разработке мультимодальной системы, объединяющей алгоритмы сегментации изображений и методы нейронных сетей для преобразования визуальных сигналов в детальное звуковое представление окружающего пространства. Система успешно прошла комплексное техническое тестирование, показав высокие функциональные и эксплуатационные характеристики. Основными достоинствами являются высокая точность распознавания объектов, определение достоверной дистанции, быстрота реакции и низкое энергопотребление. Исследование играет важную роль в развитии отечественных технологий реабилитации, нацеленных на обеспечение доступности инфраструктуры и повышение самостоятельности людей с нарушением зрения.
Ключевые слова: система, нарушение зрения, сегментация, нейронная сеть, пространственная ориентация, тестирование, эффективность.