​Выпускник Новосибирского государственного университета (НГТУ) НЭТИ создал систему, которая упростит общение для людей с ограниченным слухом. Она может автоматически озвучивать язык жестов и позволяет управлять компьютером без помощи мыши. Об этом сообщила пресс-служба Министерства науки и высшего образования РФ. 

"Выпускник НГТУ НЭТИ Алексей Приходько завершил работу над прототипом системы, который переводит язык людей с нарушениями слуха и управляет компьютером при помощи жестов. <...> Система работает по аналогии с мозгом человека. При помощи камеры программа распознает картинку и фиксирует жесты, изображение переводит в модели и обрабатывает внутри системы, сопоставляя их с данными в нейронной сети, после чего компьютер выводит на монитор уже соответствующий жестам перевод", - говорится в сообщении ведомства.

Разработать хорошую систему для перевода с жестового языка сложно из-за особенностей его грамматики. Дело в том, что перевод напрямую зависит не только от конфигурации и ориентации рук, но и от их движения, месторасположения, а также выражения лица, движений губ и других знаков. Именно поэтому ни одна из существующих программ пока не может заменить живых переводчиков.

"Существует два способа распознавания жестов при помощи техники: безмаркерный и маркерный. Маркерная система - это когда на человека надеты специальные перчатки, приборы на запястья, браслеты и современные агрегаты, которые учитывают движение мышц и точки на корпусе человека. Я пошел сложным путем, который не требует больших затрат - моя программа безмаркерным методом распознает человека и его жесты при помощи камер", - сказал Приходько.

Помимо встроенной функции переводчика система может управлять компьютером при помощи жестов. Движениями рук можно настроить громкость, яркость и управлять курсором на экране без помощи мыши. Сейчас система новосибирского программиста переводит на уровне азбуки глухих. В дальнейшем разработчик планирует обучить систему другим компонентам грамматики русского жестового языка, чтобы она подходила для как можно более широкого использования.

Также пресс-служба уточняет, что для Алексея русский жестовый язык - родной, у него и его семьи нарушения слуха. В сообщении уточняется, что Приходько - единственный в мире программист и эксперт по разработке системы для перевода с русского жестового языка. По его словам, людям, которые не знают этого языка, технически очень сложно работать над разработкой подобных систем, так как они не могут учитывать всю специфику такой лингвистики.

Источники

Российский ученый создал систему для перевода с языка глухих
Якутия 24 (yk24.ru), 05/09/2019
Ученый из Новосибирска разработал интерфейс-"переводчик" с языка жестов
Информбюро 20.35 (ntinews.ru), 05/09/2019
Российский ученый создал систему для перевода с языка глухих
Azertag.az/ru, 05/09/2019
Российский ученый создал систему для перевода с языка глухих
ТАСС, 05/09/2019
Российский ученый создал систему для перевода с языка глухих
Новости@Rambler.ru, 05/09/2019
Российский ученый создал систему для перевода с языка глухих
Спутник Новости (news.sputnik.ru), 05/09/2019
Новосибирец научил компьютер понимать жесты глухих
Официальный сайт г. Новосибирск (nsknews.info), 06/09/2019
Программист НГТУ НЭТИ обучил систему переводить жесты на русский язык
Infopro54.ru, 06/09/2019
Новосибирский программист с нарушением слуха создал автоматического переводчика жестов на звуковой язык
ИА 1-LINE (1line.info), 06/09/2019
Новосибирец научил компьютер понимать жесты глухих
Новости Новосибирска (novosibirsk-news.net), 06/09/2019
Выпускник новосибирского вуза обучил систему переводить с языка глухих
The world news (theworldnews.net), 06/09/2019
Выпускник новосибирского вуза обучил систему переводить с языка глухих
ИА Regnum, 06/09/2019
Новосибирский ученый создал компьютерный переводчик с языка глухих
Ведомости Законодательного Собрания Новосибирской области, 06/09/2019
Ученый из Новосибирска разработал программу перевода с языка жестов
SM News (sm-news.ru), 06/09/2019
Глухой программист обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Буряад унэн (burunen.ru), 06/09/2019
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши (видео)
БезФормата Новосибирск (novosibirsk.bezformata.com), 06/09/2019
Российский ученый разработал систему озвучивания языка жестов
Реальное время (realnoevremya.ru), 05/09/2019
Новосибирская область: Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык
Seldon.News (news.myseldon.com), 06/09/2019
Новосибирская область: Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык
Молодежное информационное агентство (миамир.рф), 06/09/2019
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Пульс кадровой индустрии (hrpuls.ru), 06/09/2019
Ученый из Новосибирска разработал программу перевода с языка жестов
123ru.net, 06/09/2019
Ученый из Новосибирска разработал программу перевода с языка жестов
Новости России (news-life.ru), 06/09/2019
Новосибирский ученый создал систему перевода с языка глухих
Континент Сибирь (ksonline.ru), 09/09/2019
Глухой программист из Новосибирска научил компьютер сурдопереводу
Нож (knife.media), 09/09/2019
Компьютерный переводчик с языка глухих придумал ученый из Новосибирска
Курьер. Среда (kurer-sreda.ru), 10/09/2019
Программист из Новосибирска создал систему перевода языка жестов
ИА Regnum, 10/09/2019
Программист из Новосибирска создал программу перевода с языка глухих
Evo-rus.com, 10/09/2019
Новосибирский программист обучил систему жестовому русскому языку
Занимательная робототехника (edurobots.ru), 10/09/2019
Программист из Новосибирска создал систему перевода языка жестов: Яндекс.Новости
Яндекс.Новости (news.yandex.ru), 10/09/2019
Глухой программист из Новосибирска научил компьютер понимать язык жестов
Око планеты (oko-planet.su), 10/09/2019
Глухой программист из Новосибирска разработал автоматический переводчик с языка жестов
123ru.net, 10/09/2019
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
СПб.Собака.ru (sobaka.ru), 11/09/2019
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Новости@Rambler.ru, 11/09/2019
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
5 Канал # Известия, 12/09/2019
Российский программист научил компьютер переводить с языка жестов
Novosibirsk.4geo.ru, 12/09/2019
Российский программист научил компьютер переводить с языка жестов
Bisnes-sodeistvie.ru, 12/09/2019
Российский программист научил компьютер переводить с языка жестов
Новости@Rambler.ru, 12/09/2019
Российский программист научил компьютер переводить с языка жестов
Мир24 (mir24.tv), 12/09/2019
Российский программист научил компьютер переводить с языка жестов
News.hi.ru, 12/09/2019
Российский программист научил компьютер переводить с языка жестов
Seldon.News (news.myseldon.com), 12/09/2019
Российский программист научил компьютер переводить с языка жестов
Новости РУ (новости-ру.рф), 11/09/2019
Российский программист научил компьютер переводить с языка жестов
World media press (worldmedia.press), 12/09/2019
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
Экономика сегодня (rueconomics.ru), 12/09/2019
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
Seldon.News (news.myseldon.com), 12/09/2019
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
Новости России (news-life.ru), 12/09/2019
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
ИА ОСЕАН (osean.ru), 12/09/2019
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
5 Канал (5-tv.ru), 12/09/2019
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
Seldon.News (news.myseldon.com), 12/09/2019
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
Новости России (news-life.ru), 12/09/2019
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
NBPrice.RU, 12/09/2019
Глухой программист "научил" компьютер понимать язык жестов
The world news (theworldnews.net), 24/09/2019
Глухой программист "научил" компьютер понимать язык жестов
Российская газета (rg.ru), 24/09/2019
Глухой программист научил компьютер понимать жестовый язык
Российская газета # Неделя, 25/09/2019
ОБЪЯСНИТЬ НА ПАЛЬЦАХ
Российская газета # Москва, 25/09/2019
ОБЪЯСНИТЬ НА ПАЛЬЦАХ
Российская газета, 25/09/2019
В России создается первый электронный переводчик языка жестов
RateNews.ru, 17/10/2019
В России создается первый электронный переводчик языка жестов
Русский пульс (russianpulse.ru), 16/10/2019
В России создается первый электронный переводчик языка жестов
123ru.net, 16/10/2019
В России создается первый электронный переводчик языка жестов
Новости России (news-life.ru), 16/10/2019

Похожие новости

  • 23/08/2019

    Российские ученые намерены создать искусственного собеседника к 2025 году

    ​Сотрудники и выпускники Новосибирского государственного университета (НГТУ) НЭТИ планируют усовершенствовать первого в мире голосового робота, который может моделировать живую речь человека, до автономного собеседника к 2025 году.
    539
  • 22/05/2019

    IT-платформа будет презентована на конференции "EdCrunch" в Томске

    ​Разработанная в НГТУ НЭТИ IT-платформа для профессионального самоопределения школьников будет презентована на Международной образовательной конференции "EdCrunch" в Томске. Презентация программы для тестирования школьников на способности к цифровой экономике станет одним из главных событий крупнейшей сибирской конференции по новым образовательным технологиям, а уже в июне 2019 года программа станет доступна для скачивания на мобильные телефоны в Google Play или App Store.
    551
  • 30/10/2019

    В НГТУ появится Дом научной коллаборации для школьников

    ​В Новосибирском государственном техническом университете появится Дом научной коллаборации (ДНК) имени Ю. Кондратюка — в нем школьники смогут заниматься научными разработками. Как рассказал корреспонденту пресс-секретарь НГТУ Юрий Лобанов, открытие ДНК планируется осенью 2020 года: «Задача у ДНК — это прежде всего готовить детей к научному будущему, инженерной карьере.
    71
  • 12/04/2018

    Ученые НГТУ предложили строить систему распределенной генерации энергии в Новосибирской области

    5—6 апреля 2018 года в Новосибирске прошел III международный форум «Городские технологии 2018», участие в котором приняли сотрудники, аспиранты и студенты Новосибирского государственного технического университета.
    722
  • 04/04/2017

    Новосибирские инженеры создают модуль для увеличения запаса хода инвалидной коляски

    Инженеры Новосибирского государственного технического университета (НГТУ) создадут универсальный силовой модуль для инвалидных колясок. Модуль позволит превратить механическую коляску в автоматизированную и увеличит запас ее хода на 50%, сообщил ТАСС один из разработчиков, сотрудник НГТУ Илья Дымов.
    976
  • 20/06/2017

    Международная выставка «НТИ ЭКСПО» в Новосибирске

    ​​​Уникальная международная выставка достижений технологического развития "НТИ ЭКСПО" пройдет в рамках V Международного форума технологического развития "Технопром-2017" 20-22 июня в Новосибирске при поддержке правительства РФ, коллегии ВПК, Минпромторга России, Минэкономразвития России, МИДа РФ, правительства Новосибирской области.
    2922
  • 06/04/2017

    Новосибирские инженеры создали платформу для корректировки траектории бурения скважин

    Проект программной платформы для комплексного геофизического сопровождения добычи полезных ископаемых Geoleum стал одним из резидентов новосибирского Технопарка (Академпарка) по итогам бизнес- ускорителя "А: СТАРТ".
    1438
  • 20/12/2018

    Первую в стране автоматическую афишу создали студенты НГТУ

    ​Новосибирским студентам разработка первой в России платформы-агрегатора мероприятий принесла победу на форуме разработчиков IT-проектов Cyber Garden «Умный город» в номинации «IT-прорыв». Обучающиеся НГТУ разработали уникальный сайт-агрегатор «Event Me!».
    933
  • 12/08/2019

    В Новосибирске разработали автономную систему сбора данных по экомониторингу

    ​Новосибирские разработчики создали автономную систему сбора данных с датчиков экологического мониторинга, которая отличается от применяемых систем тем, что не требует ручного сбора информации с приборов, а также способна отслеживать точное местоположение датчиков и время показаний, кроме того, систему можно применять в энергетике и других отраслях.
    340
  • 11/03/2019

    Новосибирские школьники конструируют атомолет

    Разработки конструкторских бюро 50-х годов вновь в центре внимания. Новосибирские студенты и школьники, заинтересованные ядерной физикой, разобрали возможность создания атомолета нового поколения. Лекцию о тонкостях двигателестроения с ядерной силовой установкой послушали корреспонденты ОТС.
    630