Система виденья для людей с нарушением зрения

Паксеев, Иван Николаевич Отделение автоматизации и робототехники (ОАР)
Бесплатно
В избранное
Работа доступна по лицензии Creative Commons:«Attribution» 4.0

Объектом исследования является устройство для навигации людей с нарушением зрения до локальных целевых объектов окружающего пространства. Целью работы стоит проектирование устройства навигации для незрячих людей.
Работа имеет социальную значимость.
В результате работы спроектирована структурная схема устройства, а проведенное исследование показывает реализуемость данного предложения.

ВВЕДЕНИЕ …………………………………………………………………………………………………. 13
1 Анализ предметной области ……………………………………………………………………… 15
1.1 Навигация…………………………………………………………………………………………… 15
1.1.1 Глобальное позиционирование……………………………………………………… 16
1.1.2 Wi-Fi Positioning System ……………………………………………………………….. 16
1.1.3 Bluetooth Beacon …………………………………………………………………………… 17
1.1.4 Инерционные навигационные системы …………………………………………. 18
1.1.5 Система технического зрения ……………………………………………………….. 19
1.1.6 Вывод по навигации …………………………………………………………………….. 20
1.2 Распознавание изображений ……………………………………………………………….. 21
1.3 Аудио информирование ……………………………………………………………………… 21
1.4 Тактильные технологии ………………………………………………………………………. 23
1.5 Гибкая электроника…………………………………………………………………………….. 24
2 Практическая часть …………………………………………………………………………………… 28
2.1 Анализ интервью ………………………………………………………………………………… 28
2.2 Существующие решения …………………………………………………………………….. 30
2.3 Проектирование структурной схемы устройства …………………………………. 34
2.3.1 Пользовательский интерфейс ……………………………………………………….. 34
2.3.2 Система технического зрения ……………………………………………………….. 35
2.3.3 Распознавание сцены ……………………………………………………………………. 36
2.3.4 Навигация…………………………………………………………………………………….. 36
2.3.5 Устройство обработки данных ……………………………………………………… 37
2.3.6 Деление информации на два канала………………………………………………. 37
2.3.7 Тактильный канал ………………………………………………………………………… 39
2.3.8 Аудиоканал ………………………………………………………………………………….. 40
2.3.9 Структурная схема устройства ……………………………………………………… 40
2.4 Поиск номера маршрута ……………………………………………………………………… 41
2.4.1 Создание набора данных ………………………………………………………………. 42
2.4.2 Аннотация данных ……………………………………………………………………….. 43
2.4.3 Обучение собственного детектора ………………………………………………… 44
3 Финансовый менеджмент, ресурсоэффективность и ресурсосбережение ……. 50
4 Социальная ответственность …………………………………………………………………….. 65
ЗАКЛЮЧЕНИЕ …………………………………………………………………………………………… 79
Список публикаций студента ……………………………………………………………………….. 80
СПИСОК ИСТОЧНИКОВ ……………………………………………………………………………. 81
Приложение А (обязательное) Приложение на английском языке ………………… 86
Приложение Б (справочное) Интервью с незрячим человеком ……………………… 96

По оценкам, в 2020 году в России порядка 31 миллиона человек имеют
проблемы со зрением, а 550 тысяч слепы [1]. Отсутствие зрения у людей влечет
за собой низкую мобильность у этой группы населения. Для них становится
проблематично добираться из одной точки города в другую, делать
повседневные вещи, которые для зрячих не представляют затруднений. В связи
с этим, в последнее время наблюдается рост внимания к проблемам людей с
нарушением зрения.
В России с 2011 года реализуется программа «Доступная среда». В
рамках программы жизненно важные учреждения (больницы, университеты,
органы власти т.п.) должны быть оборудованы средствами для возможного
равного использования их услуг людьми с различными заболеваниями, в
первую очередь, это люди на инвалидных креслах и остальные маломобильные
группы.
За последние пять лет стало появляться больше работ и проектов,
призванных облегчить жизнь слепых и слабовидящих людей. В связи с
наличием почти у каждого человека смартфона, стало возможным предложить
людям приложения, которые позволяют распознавать объекты, описывать то,
что находится на изображении, осуществлять навигацию. Рынок устройств
также увеличился. Появились навигаторы способные прокладывать маршрут,
учитывая окружающее пространство человека. Все это стало доступным,
благодаря развитию технологий, появлению новых датчиков, удешевлению и
уменьшению габаритов старых.
Однако, до сих пор существующие решения не позволяют обеспечить
достаточно комфортное и безопасное передвижение пользователей. Так,
основным способом для осуществления навигации человека является голосовое
информирование о направлении движения. Сообщение пользователю подсказок
и указаний к действиям сопряжено с нагрузкой на аудиоканал, что влечет за
собой увеличение когнитивной нагрузки и отвлечение от звуков окружающего
пространства. По заявлению людей с нарушением зрения, им важно слышать
окружение, это позволяет ориентироваться в пространстве и понимать где они
находятся.
В данной дипломной работе исследуется устройство локальной
навигации для людей с нарушением зрения. Рассматриваются существующие
технические решения, патенты и статьи. Выявлены основные недостатки,
которые решаются спроектированным устройством. Проведено исследование в
рамках задачи распознавания номеров маршрутов автобусов и сформулированы
рекомендации к набору данных для обучения нейронных сетей. Написана
заявка на изобретение способа и устройства.
1 Анализ предметной области
Незрячим людям довольно сложно передвигаться в городской среде в
силу отсутствия информации об окружении. Поэтому они пользуются
различными устройствами и программами помимо белой трости,
позволяющими им ориентироваться в пространстве, находить вещи и узнавать
информацию об окружающей среде. Основными технологиями в устройствах
для незрячих людей являются:
− Навигация,
− Распознавание изображений и обработка данных,
− Аудио контакт с пользователем,
− Тактильные технологии.
Рассмотрим работы и решения из данной области.

Результатами магистерской диссертации является спроектированная
структурная схема устройства, на основе изученных статей, патентов и
решений по темам электротактильной стимуляции и навигации людей с
нарушением зрения. В качестве основы для поставленной цели и задач стало
интервью с незрячим человеком, который описал основные трудности людей с
нарушением зрения. Спроектированное устройство позволит снизить
когнитивную нагрузку на аудиоканал пользователя и обеспечить его
структурированной информацией об окружении. Результаты анализа
технологий для данного устройства позволяют утверждать реализуемость
предложенного устройства. По результатам работы была написана заявка на
изобретение устройства и способа.
Результатами исследования задачи поиска локальных объектов стал
обученный детектор на основе нейронной сети YOLOv4. В связи с
актуальностью проблемы поиска необходимого автобуса, озвученной незрячим
человеком, в данной работе была выбрана задача поиска номеров маршрутов
автобусов. В процессе работы был собран и размечен набор данных из 2110
изображений с 9091 аннотацией. В качестве классов были выбраны следующие
объекты: автобус, номер маршрута, закрытая дверь, открытая дверь и
тактильная табличка. Результаты показали, что детектор способен безошибочно
распознавать объекты на средней дистанции (около 10 метров). Для решения
проблемы с ложным детектированием необходимо в последующем провести
расширение набора данных по полученным результатам для увеличения
разнообразия изображений имеющих шумовые эффекты и искажения.
Результаты на данном этапе показали реализуемость задачи поиска локальных
объектов. Ее можно осуществлять с использованием готовых сетей при
наличии собранного и размеченного набора данных.
Список публикаций студента
Публикации по тематике магистерской диссертации:

1. Паксеев И.Н., Андраханов А.А., Тырышкин А.В. Система
тактильного видения для незрячих людей. Молодежь и современные
информационные технологии: сборник трудов XVIII Международной научно-
практической конференции студентов, аспирантов и молодых ученых (Томск,
22–26 марта 2021 г.) / Томский политехнический университет. – Томск: Изд-во
Томского политехнического университета, 2021.

Заказать новую

Лучшие эксперты сервиса ждут твоего задания

от 5 000 ₽

Не подошла эта работа?
Закажи новую работу, сделанную по твоим требованиям

    Нажимая на кнопку, я соглашаюсь на обработку персональных данных и с правилами пользования Платформой

    Хочешь уникальную работу?

    Больше 3 000 экспертов уже готовы начать работу над твоим проектом!

    Анна В. Инжэкон, студент, кандидат наук
    5 (21 отзыв)
    Выполняю работы по экономическим дисциплинам. Маркетинг, менеджмент, управление персоналом. управление проектами. Есть опыт написания магистерских и кандидатских диссе... Читать все
    Выполняю работы по экономическим дисциплинам. Маркетинг, менеджмент, управление персоналом. управление проектами. Есть опыт написания магистерских и кандидатских диссертаций. Работала в маркетинге. Практикующий бизнес-консультант.
    #Кандидатские #Магистерские
    31 Выполненная работа
    Егор В. кандидат наук, доцент
    5 (428 отзывов)
    Здравствуйте. Занимаюсь выполнением работ более 14 лет. Очень большой опыт. Более 400 успешно защищенных дипломов и диссертаций. Берусь только со 100% уверенностью. Ск... Читать все
    Здравствуйте. Занимаюсь выполнением работ более 14 лет. Очень большой опыт. Более 400 успешно защищенных дипломов и диссертаций. Берусь только со 100% уверенностью. Скорее всего Ваш заказ будет выполнен раньше срока.
    #Кандидатские #Магистерские
    694 Выполненных работы
    Анастасия Л. аспирант
    5 (8 отзывов)
    Работаю в сфере метрологического обеспечения. Защищаю кандидатскую диссертацию. Основной профиль: Метрология, стандартизация и сертификация. Оптико-электронное прибост... Читать все
    Работаю в сфере метрологического обеспечения. Защищаю кандидатскую диссертацию. Основной профиль: Метрология, стандартизация и сертификация. Оптико-электронное прибостроение, управление качеством
    #Кандидатские #Магистерские
    10 Выполненных работ
    Катерина В. преподаватель, кандидат наук
    4.6 (30 отзывов)
    Преподаватель одного из лучших ВУЗов страны, научный работник, редактор научного журнала, общественный деятель. Пишу все виды работ - от эссе до докторской диссертации... Читать все
    Преподаватель одного из лучших ВУЗов страны, научный работник, редактор научного журнала, общественный деятель. Пишу все виды работ - от эссе до докторской диссертации. Опыт работы 7 лет. Всегда на связи и готова прийти на помощь. Вместе удовлетворим самого требовательного научного руководителя. Возможно полное сопровождение: от статуса студента до получения научной степени.
    #Кандидатские #Магистерские
    47 Выполненных работ
    Кирилл Ч. ИНЖЭКОН 2010, экономика и управление на предприятии транс...
    4.9 (343 отзыва)
    Работы пишу, начиная с 2000 года. Огромный опыт и знания в области экономики. Закончил школу с золотой медалью. Два высших образования (техническое и экономическое). С... Читать все
    Работы пишу, начиная с 2000 года. Огромный опыт и знания в области экономики. Закончил школу с золотой медалью. Два высших образования (техническое и экономическое). Сейчас пишу диссертацию на соискание степени кандидата экономических наук.
    #Кандидатские #Магистерские
    692 Выполненных работы
    Шагали Е. УрГЭУ 2007, Экономика, преподаватель
    4.4 (59 отзывов)
    Серьезно отношусь к тренировке собственного интеллекта, поэтому постоянно учусь сама и с удовольствием пишу для других. За 15 лет работы выполнила более 600 дипломов и... Читать все
    Серьезно отношусь к тренировке собственного интеллекта, поэтому постоянно учусь сама и с удовольствием пишу для других. За 15 лет работы выполнила более 600 дипломов и диссертаций, Есть любимые темы - они дешевле обойдутся, ибо в радость)
    #Кандидатские #Магистерские
    76 Выполненных работ
    Екатерина П. студент
    5 (18 отзывов)
    Работы пишу исключительно сама на основании действующих нормативных правовых актов, монографий, канд. и докт. диссертаций, авторефератов, научных статей. Дополнительно... Читать все
    Работы пишу исключительно сама на основании действующих нормативных правовых актов, монографий, канд. и докт. диссертаций, авторефератов, научных статей. Дополнительно занимаюсь английским языком, уровень владения - Upper-Intermediate.
    #Кандидатские #Магистерские
    39 Выполненных работ
    Виктор В. Смоленская государственная медицинская академия 1997, Леч...
    4.7 (46 отзывов)
    Имеют опыт грамотного написания диссертационных работ по медицине, а также отдельных ее частей (литературный обзор, цели и задачи исследования, материалы и методы, выв... Читать все
    Имеют опыт грамотного написания диссертационных работ по медицине, а также отдельных ее частей (литературный обзор, цели и задачи исследования, материалы и методы, выводы).Пишу статьи в РИНЦ, ВАК.Оформление патентов от идеи до регистрации.
    #Кандидатские #Магистерские
    100 Выполненных работ
    Дмитрий М. БГАТУ 2001, электрификации, выпускник
    4.8 (17 отзывов)
    Помогаю с выполнением курсовых проектов и контрольных работ по электроснабжению, электроосвещению, электрическим машинам, электротехнике. Занимался наукой, писал стать... Читать все
    Помогаю с выполнением курсовых проектов и контрольных работ по электроснабжению, электроосвещению, электрическим машинам, электротехнике. Занимался наукой, писал статьи, патенты, кандидатскую диссертацию, преподавал. Занимаюсь этим с 2003.
    #Кандидатские #Магистерские
    19 Выполненных работ

    Другие учебные работы по предмету

    Робот для картографирования местности на базе стереокамеры
    📅 2018год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Универсальный мехатронный модуль для мобильного робота
    📅 2020год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Искусственные мускулы на основе капиллярной нити
    📅 2018год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Разработка автоматизированной системы обезвешивания на гибком подвесе
    📅 2021год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Система навигации автономного мобильного робота для работы на Крайнем Севере
    📅 2020год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Исследование роботизированной мобильной платформы KUKA youBot
    📅 2018год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)