Выпускница вуза Новосибирска разработала комплекс для обучения незрячих

Дата:

На реализацию проекта ушло шесть лет

Магистрант Сибирского государственного университета геосистем и технологий по направлению «Информационные системы и технологии» Маргарита Фролова разработала «Программно-аппаратный комплекс визуализации тактильных исследований человека для людей с ОВЗ по зрению». Вместе с командой, она работала над проектом шесть лет.

— Этот проект сопровождал меня всю студенческую жизнь, — рассказывает она. — Еще на первом курсе в наш вуз пришел запрос на техническую разработку, удешевляющую себестоимость тактильных карт для обучения незрячих. Первое время мы просто изготавливали карты на станках из фанеры. А после того, как вышел указ президента о развитии ИИ, мы придумали, как это возможно применить в нашей разработке.

Вместе с Маргаритой, над проектом работали Руслан Гришин и Даниил Мамаев. Курировал молодых ученых Артем Шарапов.

Для обеспечения полноты информации, получаемой незрячим или слабовидящим человеком, рядом с ним непрерывно должен находиться педагог или специализированный работник, объясняет Маргарита. Педагог должен внимательно следить, какие фрагменты ассистивных обучаемых материалов и в какой мере исследовал ученик. Это очень трудоемкий процесс, требующий постоянной концентрации внимания.

— И здесь большую роль играет самый обычный человеческий фактор, — продолжает Маргарита. — Педагог может на что-то отвлечься, да просто моргнуть. И определенный фрагмент выпадет из визуализации. В этом процессе человеку просто необходим помощник — машина, которая держит фокус внимания на постоянной основе.

И молодые ученые придумали такого помощника. Они изготовили длинный штатив, на который зафиксировали камеру, подключенную к компьютеру. За счет этого идет программный скрин, непрерывная трансляция, фиксирующий каждое действие обучающегося на тактильных картах. А педагогу остается только наблюдать за процессом.

программный комплекс

— Для реализации трекинга рук веб-камера располагается над поверхностью с ассистивными средствами и руками обучающегося, — объясняет разработчик. — После начинается транслироваться непрерывный видеопоток. Для анализа каждого изображения видеопотока применяется специализированная библиотека OpenCV (это библиотека для работы с алгоритмами компьютерного зрения), а именно надстройка над библиотекой CVZone.HandTrackingModule. Данная надстройка позволяет на каждом кадре определить наличие ладони при помощи обнаружения центра тыльной или внутренней частей. Если ладонь была обнаружена, радиус поиска увеличивается от центра на определенный коэффициент и определяется 21 опорная точка на всей поверхности ладони.

Социальный проект Маргариты Фроловой вошел в бизнес-инкубатор Академпарка. Уже сейчас есть запросы на социальную разработку новосибирских ученых. Интерес к комплексу проявил ООО «Медицинский интегратор», с компанией ведутся переговоры о его последующей реализации.

Ранее редакция сообщала о том, что соискателей с ограничениями здоровья охотнее берут на работу в Новосибирске

Фото freepik, автор: freepik

0
0

Ребенку с диагнозом ДЦП требуется дорогостоящее лечение

В ходе подготовки к плановому кесареву сечению у мамы Тимофея Аверченко случился анафилактический шок от введенного препарата.

— Нас с сыном спасли, но у малыша была тяжелая асфиксия, он долго лежал в реанимации и затем – в детском отделении областной больницы. Врачи выявили у него поражение головного мозга. Развивался сын с задержкой, голову начал держать только в пять месяцев. Мы наблюдались у невролога, периодически проходили реабилитацию по ОМС с положительным эффектом: в полтора года Тимофей начал садиться, в три – вставать у опоры, в шесть – ходить у опоры. Осенью прошлого года за свой счет прошли двухнедельный курс лечения в томском медцентре, после которого сын начал произносить звуки и тянуться к людям, улыбаться, стал более активным и общительным. Также Тимофей научился сидеть без поддержки, может стоять несколько секунд без опоры и даже самостоятельно сделать несколько шагов, — рассказывает мама Тимофея Наталья Аверченко.

Читать полностью

Бизнес перенес НДС в цены: годовая инфляция в Новосибирской области замедлилась до 5,7%

Годовая инфляция в регионе снижается с июля прошлого года. В январе наблюдался всплеск месячного роста в связи с резким повышением цена на огурцы и помидоры, но сейчас он также замедляется. Об этом сообщила первый заместитель начальника Сибирского ГУ Банка России Марина Асаралиева.

— Перенос увеличения НДС в цены практически завершился, — констатирует Асаралиева.

Читать полностью

Новосибирские студенты оценили специфику предпринимательства в странах Африки

В рамках Недели международной науки и образования НГУЭУ посетила делегация Университета MANCOSA (Южно-Африканская Республика). В состав делегации вошли десять представителей академического сообщества — руководители образовательных программ, исследователи и менеджеры университета.

На заседаниях форума обсуждались изменения, происходящие в экономике и образовании, а также навыки, которые становятся ключевыми в новых условиях.

Читать полностью

Организаторам ЕГЭ в Новосибирске запретили досматривать школьников

Федеральная служба по надзору в сфере образования и науки в новых методических рекомендациях прописала строгий запрет на любые прикосновения к школьникам и их вещам при входе на экзамен. В документе сказано, что «не допускается досмотр участников экзаменов». Работники охраны и организаторы не имеют права обыскивать выпускников или проверять содержимое их рюкзаков руками. Теперь вся процедура проверки строится только на добровольном согласии.

— Организаторы вне аудитории и сотрудники, осуществляющие охрану правопорядка, не прикасаются к участникам экзаменов и их вещам, а предлагают добровольно сдать предмет, вызывающий сигнал металлоискателя, в помещение (место) для хранения личных вещей участников экзаменов или сопровождающему, — говорится в документе.

Читать полностью

Бастрыкин заинтересовался трещинами в куполе оперного театра в Новосибирске

Глава Следственного комитета Российской Федерации Александр Бастрыкин запросил отчет о проверке состояния Новосибирского государственного академического театра оперы и балета (НОВАТ).

В Информационный центр Следственного комитета России поступило обращение от активистов. Они выразили обеспокоенность состоянием оперного театра, построенного в период с 1931 по 1945 годы.

Читать полностью

В Маслянинском районе ликвидировали хостел-невидимку

В Маслянинском районе закрыли хостел, который работал в подвале жилого дома. Проверку организовала прокуратура вместе с полицией, МЧС, Роспотребнадзором и Росгвардией.

Речь идёт о хостеле под названием «Kazarma», который находился в подвальном помещении многоквартирного дома.

Читать полностью
Баннер
Прямым текстом

Подпишитесь на новости
Подпишитесь на рассылку самых актуальных новостей.


Выражаю согласие на обработку персональных данных, указанных при заполнении формы подписки на рассылку новостей в соответствии с Политикой конфиденциальности

Я согласен (согласна)

 
×
Поиск по автору:
×
Апрель 2026
Пн Вт Ср Чт Пт Сб Вс
 12345
6789101112
13141516171819
20212223242526
27282930  
×





    Выражаю согласие на обработку персональных данных, указанных при заполнении формы «Предложить новость» в соответствии с Политикой конфиденциальности
    Я согласен (согласна)
    [yandex_captcha yandex_captcha-352]

    ×

    Эксклюзивный материал

    Материалы, отмеченные значком , являются эксклюзивными, то есть подготовлены на основе информации, полученной редакцией infopro54.ru. При цитировании, перепечатке ссылка на источник обязательна

    ×

      Участие в конференции бесплатно






      Формат участия:

      [yandex_captcha yandex_captcha-816]
      Отправляя сообщение, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта

      ×

        Участие в конференции бесплатно








        Отправляя сообщение, я принимаю условия соглашения об использовании персональных данных и соглашаюсь с Правилами сайта

        ×
        На нашем сайте используются файлы cookie. Продолжая пользоваться сайтом, Вы подтверждаете свое согласие на использование файлов cookie в соответствии с условиями их использования
        Понятно
        Политика конфиденциальности