Выпускник Новосибирского государственного университета (НГТУ) НЭТИ создал систему, которая упростит общение для людей с ограниченным слухом. Она может автоматически озвучивать язык жестов и позволяет управлять компьютером без помощи мыши. Об этом сообщила пресс-служба Министерства науки и высшего образования РФ.
"Выпускник НГТУ НЭТИ Алексей Приходько завершил работу над прототипом системы, который переводит язык людей с нарушениями слуха и управляет компьютером при помощи жестов. <...> Система работает по аналогии с мозгом человека. При помощи камеры программа распознает картинку и фиксирует жесты, изображение переводит в модели и обрабатывает внутри системы, сопоставляя их с данными в нейронной сети, после чего компьютер выводит на монитор уже соответствующий жестам перевод", - говорится в сообщении ведомства.
Разработать хорошую систему для перевода с жестового языка сложно из-за особенностей его грамматики. Дело в том, что перевод напрямую зависит не только от конфигурации и ориентации рук, но и от их движения, месторасположения, а также выражения лица, движений губ и других знаков. Именно поэтому ни одна из существующих программ пока не может заменить живых переводчиков.
"Существует два способа распознавания жестов при помощи техники: безмаркерный и маркерный. Маркерная система - это когда на человека надеты специальные перчатки, приборы на запястья, браслеты и современные агрегаты, которые учитывают движение мышц и точки на корпусе человека. Я пошел сложным путем, который не требует больших затрат - моя программа безмаркерным методом распознает человека и его жесты при помощи камер", - сказал Приходько.
Помимо встроенной функции переводчика система может управлять компьютером при помощи жестов. Движениями рук можно настроить громкость, яркость и управлять курсором на экране без помощи мыши. Сейчас система новосибирского программиста переводит на уровне азбуки глухих. В дальнейшем разработчик планирует обучить систему другим компонентам грамматики русского жестового языка, чтобы она подходила для как можно более широкого использования.
Также пресс-служба уточняет, что для Алексея русский жестовый язык - родной, у него и его семьи нарушения слуха. В сообщении уточняется, что Приходько - единственный в мире программист и эксперт по разработке системы для перевода с русского жестового языка. По его словам, людям, которые не знают этого языка, технически очень сложно работать над разработкой подобных систем, так как они не могут учитывать всю специфику такой лингвистики.
Российский ученый создал систему для перевода с языка глухих
Ученый из Новосибирска разработал интерфейс-"переводчик" с языка жестов
Российский ученый создал систему для перевода с языка глухих
Российский ученый создал систему для перевода с языка глухих
Российский ученый создал систему для перевода с языка глухих
Российский ученый создал систему для перевода с языка глухих
Новосибирец научил компьютер понимать жесты глухих
Программист НГТУ НЭТИ обучил систему переводить жесты на русский язык
Новосибирский программист с нарушением слуха создал автоматического переводчика жестов на звуковой язык
Новосибирец научил компьютер понимать жесты глухих
Выпускник новосибирского вуза обучил систему переводить с языка глухих
Выпускник новосибирского вуза обучил систему переводить с языка глухих
Новосибирский ученый создал компьютерный переводчик с языка глухих
Ученый из Новосибирска разработал программу перевода с языка жестов
Глухой программист обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши (видео)
Российский ученый разработал систему озвучивания языка жестов
Новосибирская область: Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык
Новосибирская область: Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Ученый из Новосибирска разработал программу перевода с языка жестов
Ученый из Новосибирска разработал программу перевода с языка жестов
Новосибирский ученый создал систему перевода с языка глухих
Глухой программист из Новосибирска научил компьютер сурдопереводу
Компьютерный переводчик с языка глухих придумал ученый из Новосибирска
Программист из Новосибирска создал систему перевода языка жестов
Программист из Новосибирска создал программу перевода с языка глухих
Новосибирский программист обучил систему жестовому русскому языку
Программист из Новосибирска создал систему перевода языка жестов: Яндекс.Новости
Глухой программист из Новосибирска научил компьютер понимать язык жестов
Глухой программист из Новосибирска разработал автоматический переводчик с языка жестов
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
Российский программист научил компьютер переводить с языка жестов
Российский программист научил компьютер переводить с языка жестов
Российский программист научил компьютер переводить с языка жестов
Российский программист научил компьютер переводить с языка жестов
Российский программист научил компьютер переводить с языка жестов
Российский программист научил компьютер переводить с языка жестов
Российский программист научил компьютер переводить с языка жестов
Российский программист научил компьютер переводить с языка жестов
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
Глухонемой программист из Новосибирска разработал систему перевода языка жестов
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
Глухонемой программист из Новосибирска научил компьютер понимать язык жестов
Глухой программист НГТУ НЭТИ обучил систему переводить жесты на русский язык и управлять компьютером без помощи мыши
Глухой программист "научил" компьютер понимать язык жестов
Глухой программист "научил" компьютер понимать язык жестов
Глухой программист научил компьютер понимать жестовый язык
ОБЪЯСНИТЬ НА ПАЛЬЦАХ
ОБЪЯСНИТЬ НА ПАЛЬЦАХ
В России создается первый электронный переводчик языка жестов
В России создается первый электронный переводчик языка жестов
В России создается первый электронный переводчик языка жестов
В России создается первый электронный переводчик языка жестов