Система виденья для людей с нарушением зрения

Бесплатно
Работа доступна по лицензии Creative Commons:«Attribution» 4.0
Паксеев, Иван Николаевич Отделение автоматизации и робототехники (ОАР)
Бесплатно
Работа доступна по лицензии Creative Commons:«Attribution» 4.0

Объектом исследования является устройство для навигации людей с нарушением зрения до локальных целевых объектов окружающего пространства. Целью работы стоит проектирование устройства навигации для незрячих людей.
Работа имеет социальную значимость.
В результате работы спроектирована структурная схема устройства, а проведенное исследование показывает реализуемость данного предложения.

ВВЕДЕНИЕ …………………………………………………………………………………………………. 13
1 Анализ предметной области ……………………………………………………………………… 15
1.1 Навигация…………………………………………………………………………………………… 15
1.1.1 Глобальное позиционирование……………………………………………………… 16
1.1.2 Wi-Fi Positioning System ……………………………………………………………….. 16
1.1.3 Bluetooth Beacon …………………………………………………………………………… 17
1.1.4 Инерционные навигационные системы …………………………………………. 18
1.1.5 Система технического зрения ……………………………………………………….. 19
1.1.6 Вывод по навигации …………………………………………………………………….. 20
1.2 Распознавание изображений ……………………………………………………………….. 21
1.3 Аудио информирование ……………………………………………………………………… 21
1.4 Тактильные технологии ………………………………………………………………………. 23
1.5 Гибкая электроника…………………………………………………………………………….. 24
2 Практическая часть …………………………………………………………………………………… 28
2.1 Анализ интервью ………………………………………………………………………………… 28
2.2 Существующие решения …………………………………………………………………….. 30
2.3 Проектирование структурной схемы устройства …………………………………. 34
2.3.1 Пользовательский интерфейс ……………………………………………………….. 34
2.3.2 Система технического зрения ……………………………………………………….. 35
2.3.3 Распознавание сцены ……………………………………………………………………. 36
2.3.4 Навигация…………………………………………………………………………………….. 36
2.3.5 Устройство обработки данных ……………………………………………………… 37
2.3.6 Деление информации на два канала………………………………………………. 37
2.3.7 Тактильный канал ………………………………………………………………………… 39
2.3.8 Аудиоканал ………………………………………………………………………………….. 40
2.3.9 Структурная схема устройства ……………………………………………………… 40
2.4 Поиск номера маршрута ……………………………………………………………………… 41
2.4.1 Создание набора данных ………………………………………………………………. 42
2.4.2 Аннотация данных ……………………………………………………………………….. 43
2.4.3 Обучение собственного детектора ………………………………………………… 44
3 Финансовый менеджмент, ресурсоэффективность и ресурсосбережение ……. 50
4 Социальная ответственность …………………………………………………………………….. 65
ЗАКЛЮЧЕНИЕ …………………………………………………………………………………………… 79
Список публикаций студента ……………………………………………………………………….. 80
СПИСОК ИСТОЧНИКОВ ……………………………………………………………………………. 81
Приложение А (обязательное) Приложение на английском языке ………………… 86
Приложение Б (справочное) Интервью с незрячим человеком ……………………… 96

По оценкам, в 2020 году в России порядка 31 миллиона человек имеют
проблемы со зрением, а 550 тысяч слепы [1]. Отсутствие зрения у людей влечет
за собой низкую мобильность у этой группы населения. Для них становится
проблематично добираться из одной точки города в другую, делать
повседневные вещи, которые для зрячих не представляют затруднений. В связи
с этим, в последнее время наблюдается рост внимания к проблемам людей с
нарушением зрения.
В России с 2011 года реализуется программа «Доступная среда». В
рамках программы жизненно важные учреждения (больницы, университеты,
органы власти т.п.) должны быть оборудованы средствами для возможного
равного использования их услуг людьми с различными заболеваниями, в
первую очередь, это люди на инвалидных креслах и остальные маломобильные
группы.
За последние пять лет стало появляться больше работ и проектов,
призванных облегчить жизнь слепых и слабовидящих людей. В связи с
наличием почти у каждого человека смартфона, стало возможным предложить
людям приложения, которые позволяют распознавать объекты, описывать то,
что находится на изображении, осуществлять навигацию. Рынок устройств
также увеличился. Появились навигаторы способные прокладывать маршрут,
учитывая окружающее пространство человека. Все это стало доступным,
благодаря развитию технологий, появлению новых датчиков, удешевлению и
уменьшению габаритов старых.
Однако, до сих пор существующие решения не позволяют обеспечить
достаточно комфортное и безопасное передвижение пользователей. Так,
основным способом для осуществления навигации человека является голосовое
информирование о направлении движения. Сообщение пользователю подсказок
и указаний к действиям сопряжено с нагрузкой на аудиоканал, что влечет за
собой увеличение когнитивной нагрузки и отвлечение от звуков окружающего
пространства. По заявлению людей с нарушением зрения, им важно слышать
окружение, это позволяет ориентироваться в пространстве и понимать где они
находятся.
В данной дипломной работе исследуется устройство локальной
навигации для людей с нарушением зрения. Рассматриваются существующие
технические решения, патенты и статьи. Выявлены основные недостатки,
которые решаются спроектированным устройством. Проведено исследование в
рамках задачи распознавания номеров маршрутов автобусов и сформулированы
рекомендации к набору данных для обучения нейронных сетей. Написана
заявка на изобретение способа и устройства.
1 Анализ предметной области
Незрячим людям довольно сложно передвигаться в городской среде в
силу отсутствия информации об окружении. Поэтому они пользуются
различными устройствами и программами помимо белой трости,
позволяющими им ориентироваться в пространстве, находить вещи и узнавать
информацию об окружающей среде. Основными технологиями в устройствах
для незрячих людей являются:
− Навигация,
− Распознавание изображений и обработка данных,
− Аудио контакт с пользователем,
− Тактильные технологии.
Рассмотрим работы и решения из данной области.

Результатами магистерской диссертации является спроектированная
структурная схема устройства, на основе изученных статей, патентов и
решений по темам электротактильной стимуляции и навигации людей с
нарушением зрения. В качестве основы для поставленной цели и задач стало
интервью с незрячим человеком, который описал основные трудности людей с
нарушением зрения. Спроектированное устройство позволит снизить
когнитивную нагрузку на аудиоканал пользователя и обеспечить его
структурированной информацией об окружении. Результаты анализа
технологий для данного устройства позволяют утверждать реализуемость
предложенного устройства. По результатам работы была написана заявка на
изобретение устройства и способа.
Результатами исследования задачи поиска локальных объектов стал
обученный детектор на основе нейронной сети YOLOv4. В связи с
актуальностью проблемы поиска необходимого автобуса, озвученной незрячим
человеком, в данной работе была выбрана задача поиска номеров маршрутов
автобусов. В процессе работы был собран и размечен набор данных из 2110
изображений с 9091 аннотацией. В качестве классов были выбраны следующие
объекты: автобус, номер маршрута, закрытая дверь, открытая дверь и
тактильная табличка. Результаты показали, что детектор способен безошибочно
распознавать объекты на средней дистанции (около 10 метров). Для решения
проблемы с ложным детектированием необходимо в последующем провести
расширение набора данных по полученным результатам для увеличения
разнообразия изображений имеющих шумовые эффекты и искажения.
Результаты на данном этапе показали реализуемость задачи поиска локальных
объектов. Ее можно осуществлять с использованием готовых сетей при
наличии собранного и размеченного набора данных.
Список публикаций студента
Публикации по тематике магистерской диссертации:

1. Паксеев И.Н., Андраханов А.А., Тырышкин А.В. Система
тактильного видения для незрячих людей. Молодежь и современные
информационные технологии: сборник трудов XVIII Международной научно-
практической конференции студентов, аспирантов и молодых ученых (Томск,
22–26 марта 2021 г.) / Томский политехнический университет. – Томск: Изд-во
Томского политехнического университета, 2021.

Заказать новую

Лучшие эксперты сервиса ждут твоего задания

от 5 000 ₽

Не подошла эта работа?
Закажи новую работу, сделанную по твоим требованиям

    Нажимая на кнопку, я соглашаюсь на обработку персональных данных и с правилами пользования Платформой

    Читать «Система виденья для людей с нарушением зрения»

    Последние выполненные заказы

    Хочешь уникальную работу?

    Больше 3 000 экспертов уже готовы начать работу над твоим проектом!

    Виктор В. Смоленская государственная медицинская академия 1997, Леч...
    4.7 (46 отзывов)
    Имеют опыт грамотного написания диссертационных работ по медицине, а также отдельных ее частей (литературный обзор, цели и задачи исследования, материалы и методы, выв... Читать все
    Имеют опыт грамотного написания диссертационных работ по медицине, а также отдельных ее частей (литературный обзор, цели и задачи исследования, материалы и методы, выводы).Пишу статьи в РИНЦ, ВАК.Оформление патентов от идеи до регистрации.
    #Кандидатские #Магистерские
    100 Выполненных работ
    Татьяна М. кандидат наук
    5 (285 отзывов)
    Специализируюсь на правовых дипломных работах, магистерских и кандидатских диссертациях
    Специализируюсь на правовых дипломных работах, магистерских и кандидатских диссертациях
    #Кандидатские #Магистерские
    495 Выполненных работ
    Дмитрий М. БГАТУ 2001, электрификации, выпускник
    4.8 (17 отзывов)
    Помогаю с выполнением курсовых проектов и контрольных работ по электроснабжению, электроосвещению, электрическим машинам, электротехнике. Занимался наукой, писал стать... Читать все
    Помогаю с выполнением курсовых проектов и контрольных работ по электроснабжению, электроосвещению, электрическим машинам, электротехнике. Занимался наукой, писал статьи, патенты, кандидатскую диссертацию, преподавал. Занимаюсь этим с 2003.
    #Кандидатские #Магистерские
    19 Выполненных работ
    Петр П. кандидат наук
    4.2 (25 отзывов)
    Выполняю различные работы на заказ с 2014 года. В основном, курсовые проекты, дипломные и выпускные квалификационные работы бакалавриата, специалитета. Имею опыт напис... Читать все
    Выполняю различные работы на заказ с 2014 года. В основном, курсовые проекты, дипломные и выпускные квалификационные работы бакалавриата, специалитета. Имею опыт написания магистерских диссертаций. Направление - связь, телекоммуникации, информационная безопасность, информационные технологии, экономика. Пишу научные статьи уровня ВАК и РИНЦ. Работаю техническим директором интернет-провайдера, имею опыт работы ведущим сотрудником отдела информационной безопасности филиала одного из крупнейших банков. Образование - высшее профессиональное (в 2006 году окончил военную Академию связи в г. Санкт-Петербурге), послевузовское профессиональное (в 2018 году окончил аспирантуру Уральского федерального университета). Защитил диссертацию на соискание степени "кандидат технических наук" в 2020 году. В качестве хобби преподаю. Дисциплины - сети ЭВМ и телекоммуникации, информационная безопасность объектов критической информационной инфраструктуры.
    #Кандидатские #Магистерские
    33 Выполненных работы
    Екатерина П. студент
    5 (18 отзывов)
    Работы пишу исключительно сама на основании действующих нормативных правовых актов, монографий, канд. и докт. диссертаций, авторефератов, научных статей. Дополнительно... Читать все
    Работы пишу исключительно сама на основании действующих нормативных правовых актов, монографий, канд. и докт. диссертаций, авторефератов, научных статей. Дополнительно занимаюсь английским языком, уровень владения - Upper-Intermediate.
    #Кандидатские #Магистерские
    39 Выполненных работ
    Кормчий В.
    4.3 (248 отзывов)
    Специализация: диссертации; дипломные и курсовые работы; научные статьи.
    Специализация: диссертации; дипломные и курсовые работы; научные статьи.
    #Кандидатские #Магистерские
    335 Выполненных работ
    Рима С.
    5 (18 отзывов)
    Берусь за решение юридических задач, за написание серьезных научных статей, магистерских диссертаций и дипломных работ. Окончила Кемеровский государственный универси... Читать все
    Берусь за решение юридических задач, за написание серьезных научных статей, магистерских диссертаций и дипломных работ. Окончила Кемеровский государственный университет, являюсь бакалавром, магистром юриспруденции (с отличием)
    #Кандидатские #Магистерские
    38 Выполненных работ
    Логик Ф. кандидат наук, доцент
    4.9 (826 отзывов)
    Я - кандидат философских наук, доцент кафедры философии СГЮА. Занимаюсь написанием различного рода работ (научные статьи, курсовые, дипломные работы, магистерские дисс... Читать все
    Я - кандидат философских наук, доцент кафедры философии СГЮА. Занимаюсь написанием различного рода работ (научные статьи, курсовые, дипломные работы, магистерские диссертации, рефераты, контрольные) уже много лет. Качество работ гарантирую.
    #Кандидатские #Магистерские
    1486 Выполненных работ
    Анастасия Л. аспирант
    5 (8 отзывов)
    Работаю в сфере метрологического обеспечения. Защищаю кандидатскую диссертацию. Основной профиль: Метрология, стандартизация и сертификация. Оптико-электронное прибост... Читать все
    Работаю в сфере метрологического обеспечения. Защищаю кандидатскую диссертацию. Основной профиль: Метрология, стандартизация и сертификация. Оптико-электронное прибостроение, управление качеством
    #Кандидатские #Магистерские
    10 Выполненных работ

    Другие учебные работы по предмету

    Робот для картографирования местности на базе стереокамеры
    📅 2018 год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Универсальный мехатронный модуль для мобильного робота
    📅 2020 год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Искусственные мускулы на основе капиллярной нити
    📅 2018 год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Разработка автоматизированной системы обезвешивания на гибком подвесе
    📅 2021 год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Система навигации автономного мобильного робота для работы на Крайнем Севере
    📅 2020 год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)
    Исследование роботизированной мобильной платформы KUKA youBot
    📅 2018 год
    🏢 Национальный исследовательский Томский политехнический университет (ТПУ)