21 февраля были определены победители конкурса на предоставление грантов Президента Российской Федерации. Грант в размере 10 млн рублей выиграл инженер кафедры автоматизированных систем управления НГТУ НЭТИ Алексей Приходько. Алексей Приходько — единственный глухой программист в мире, который работает над созданием автоматического переводчика жестов на письменный язык. Искусственный интеллект переводит язык людей с нарушениями слуха и управляет компьютером при помощи жестов.

Алексей Приходько уже создал прототип системы, которая переводит на уровне азбуки глухих (видео). На выделенные средства Алексей планирует обучить систему другим компонентам грамматики русского жестового языка (РЖЯ), чтобы довести программу до готового продукта для широкого использования среди глухих. Среди главных задач наполнение базы жестов РЖЯ, разработка алгоритмического и программного обеспечения распознавания траекторий движения и конфигураций отдельных компонентов жестов глухих, которые будут заданы в форме видеофайлов, и создание мобильной версии программы.


Система ориентирована на глухих граждан России, всех заинтересованных сторон в использовании русского жестового языка, в том числе и зарубежных пользователей. На первом этапе реализации тестирование программы будет проводиться в Институте социальных технологий Новосибирского государственного технического университета НЭТИ. Сроки реализации проекта — с 1 марта 2020 года по 28 февраля 2022 года.


Инженер кафедры автоматизированных систем управления НГТУ НЭТИ Алексей Приходько — единственный в мире глухой программист и эксперт по разработке системы для перевода РЖЯ. «Я — исполнитель, я же — и разработчик. Представьте, если бы я занимался пианино, я не смог бы ремонтировать его, настраивать, потому что я его не слышу. То же самое и человек, который не знает жестового языка. Технически ему очень сложно работать над этим, потому что он не может учитывать всю специфику этой лингвистики», — утверждает Алексей Приходько.

Основная функция программы, над которой работает Алексей, — перевод. Система работает по аналогии с мозгом человека. При помощи камеры программа распознает картинку и фиксирует жесты, изображение переводит в модели и обрабатывает внутри системы, сопоставляя их с данными в нейронной сети, после чего компьютер выводит на монитор уже соответствующий жестам перевод. Помимо встроенной функции переводчика, система способна управлять компьютером при помощи жестов. Движениями рук можно настроить громкость, яркость и управлять курсором на экране без помощи мыши.

Безмаркерная система, которую использует в системе Алексей, при помощи специальных камер накладывает виртуальную «сетку» на получаемое изображение. На этой «сетке» программные алгоритмы находят опорные точки, по которым определяются жесты. Далее система обрабатывает данные и после воспроизводит заданные действия: перевод или управление.

Для автора разработки русский жестовый язык — родной. Он и его семья — глухие. Алексей не слышит с детства, но это не помешало ему стать экспертом в программировании. Целеустремленность и математические способности помогли Алексею Приходько не только получить высшее образование в НГТУ НЭТИ и стать одним из самых успешных аспирантов университета, но и пройти стажировку в Германии по приглашению Гамбургского университета, одержать победу на хакатоне федерального проекта «Россия — страна возможностей», получить грант фонда Владимира Потанина, а также выступить в роли спикера на IT-конференции в Мюнхене и разработать прототип компьютерного переводчика РЖЯ.

Напоминаем, что в октябре 2019 года состоялась встреча инженера НГТУ НЭТИ Алексея Приходько и президента России Владимира Путина. Молодой ученый рассказал президенту о своем проекте — программе-переводчике русского жестового языка.


Справка

Фонд является единым оператором грантов Президента Российской Федерации на развитие гражданского общества. Всего на конкурс поступило 9 308 проектов от 7 946 некоммерческих организаций. Гранты на общую сумму 4 092 млн рублей получат 2 017 организаций из всех 85 регионов страны.

Источники

Путин дал глухому инженеру НГТУ НЭТИ 10 млн рублей на создание компьютерного переводчика жестового языка
Новосибирский государственный технический университет (nstu.ru), 26/02/2020
Путин дал глухому инженеру из Новосибирска 10 млн рублей на создание языка жестов
Прецедент (precedent.tv), 26/02/2020
Путин дал глухому инженеру НГТУ НЭТИ 10 млн рублей на создание компьютерного переводчика жестового языка с искусственным интеллектом
Международный промышленный портал (promvest.info), 26/02/2020
Президентский грант в размере 10 млн рублей получил глухой инженер НГТУ НЭТИ
НИА Новосибирск (54rus.org), 26/02/2020
Глухой инженер НГТУ НЭТИ получил от Президента 10 млн рублей на создание компьютерного переводчика жестового языка с искусственным интеллектом
Пульс кадровой индустрии (hrpuls.ru), 26/02/2020
Путин дал глухому инженеру НГТУ НЭТИ 10 млн рублей на создание компьютерного переводчика жестового языка
Informio.ru, 26/02/2020
Пульс дня Новосибирска
Честное слово (chslovo.com), 27/02/2020
Путин дал глухому инженеру НГТУ НЭТИ 10 млн рублей на создание компьютерного переводчика жестового языка
Портал машиностроения (mashportal.ru), 27/02/2020
Путин дал 10 млн глухому сибирскому программисту на переводчик жестов
HOLME SPACE (holme.ru), 28/02/2020
Путин дал 10 млн глухому сибирскому программисту на переводчик жестов
Новосибирские новости (nscn.ru), 28/02/2020
Глухой программист из Новосибирска получил от Президента 10 млн рублей
Новости регионов России (skoronovosti.ru), 28/02/2020
Путин дал 10 млн глухому сибирскому программисту на переводчик жестов
Московский Комсомолец # Новосибирск (novos.mk.ru), 27/02/2020
Путин дал 10 млн глухому сибирскому программисту на переводчик жестов
Seldon.News (news.myseldon.com), 27/02/2020
Президентский грант в размере 10 млн рублей выиграл глухой инженер НГТУ НЭТИ
Департамент образования Новосибирской области (minobr.nso.ru), 27/02/2020
Единственный в мире глухой программист из Новосибирска разработал переводчик жестового языка
Комсомольская правда (nsk.kp.ru), 27/02/2020
Единственный в мире глухой программист из Новосибирска разработал переводчик жестового языка
Seldon.News (news.myseldon.com), 27/02/2020
Глухой программист из Новосибирска получил от Президента 10 млн рублей
Atas.info, 27/02/2020
Новосибирский инженер получил президентский грант на электронный переводчик с языка жестов
Радио Юнитон (uniton.ru), 27/02/2020
Новосибирец получил от президента 10 млн на переводчик жестового языка
The world news (theworldnews.net), 27/02/2020
Глухой программист из Новосибирска получит 10 млн рублей от Путина
Яндекс.Новости (yandex.ru/news), 27/02/2020
Глухой инженер НГТУ НЭТИ получил грант от президента на создание компьютерного переводчика жестового языка с искусственным интеллектом
СПб.Собака.ru (sobaka.ru), 27/02/2020
Новосибирец получил от президента 10 млн на переводчик жестового языка
ИА Regnum, 27/02/2020
Новосибирец получил от президента 10 млн на переводчик жестового языка
Seldon.News (news.myseldon.com), 27/02/2020
Глухой программист из Новосибирска получит 10 млн рублей от Путина
Коммерсантъ # Красноярск.ru, 27/02/2020
Глухой программист из Новосибирска получил 10 млн рублей от Путина
RuNews24 (runews24.ru), 27/02/2020
Глухой программист из Новосибирска получил 10 млн рублей от Путина
Seldon.News (news.myseldon.com), 27/02/2020
Глухой программист получил президентский грант на переводчик с жестового
Официальный сайт г. Новосибирск (nsknews.info), 26/02/2020
Инженер НГТУ НЭТИ получил 10 млн рублей на создание компьютерного переводчика жестового языка
Infopro54.ru, 26/02/2020
Инженер НГТУ НЭТИ получил 10 млн рублей на создание компьютерного переводчика жестового языка
Seldon.News (news.myseldon.com), 26/02/2020
Путин выделил глухому программисту из Новосибирска 10 млн рублей на компьютерный переводчик жестов
Om1.ru, 26/02/2020
Глухой программист получил президентский грант на переводчик с жестового
Новости Новосибирска (novosibirsk-news.net), 26/02/2020
Десять миллионов рублей дал Путин новосибирскому глухому инженеру
Gorsite.ru, 26/02/2020
Глухой программист из НЭТИ получил 10 миллионов от Путина
Новая Сибирь (newsib.net), 26/02/2020
Путин дал 10 миллионов глухому программисту из Новосибирска
Новосибирский городской сайт (ngs.ru), 26/02/2020
Путин выделил глухому программисту из Новосибирска 10 млн рублей на компьютерный переводчик жестов
Gorodskoyportal.ru/omsk, 26/02/2020

Похожие новости

  • 04/04/2019

    Новосибирские школьники прокачают навыки цифровой экономики

    ​К реализации проекта по профессиональному самоопределению школьников в цифровой экономике, выполненному на интеллектуальной ИТ-платформе, разработанной в НГТУ НЭТИ, подключилась каждая четвертая школа Новосибирской области.
    675
  • 13/06/2019

    НГТУ НЭТИ открывает спецкурс по защите информации до уровня «совершенно секретно»

    ​Новосибирский государственный технический университет НЭТИ и компания «РусБИТех-Астра», российский производитель операционных систем, подписали договор об организации на базе университета учебного центра Astralinux.
    490
  • 11/09/2019

    Список перспективных проектов из Сибири

    ​Сквозные цифровые технологии являются ключевыми направлениями НТИ. Их девять, включая робототехнику, нейротехнологии, промышленный интернет, большие данные, технологии дополненной реальности и др. Именно в этих направлениях у талантливых технологических предпринимателей есть шансы на успех.
    210
  • 14/12/2019

    От умного дома – к умному городу

    ​В недалеком будущем столицу Сибири ожидает массовое внедрение цифровых технологий в ЖКХ, увеличение бюджетных мест на IT-специальности, построение локальных сетей в школах и гранты для компаний, развивающих цифровизацию.
    420
  • 19/03/2015

    Что вырастим, то вырастим: 3D-индустрия

    ​В стакан с песком мы кольцами, одно поверх другого, наливаем клей, он застывает, затем снова и снова льем клей и подсыпаем песку... Потом отряхиваем лишнее и получаем нечто вроде трубы. Заменим песок специально подготовленным порошком из металла, керамики или композита, струйку клея - лучом лазера или потоком электронов, а собственную руку - системами точного, до микрон, позиционирования и интеллектуального управления.
    1541
  • 21/10/2019

    Алексей Приходько о работе над созданием автоматического онлайн-переводчика с русского жестового языка

    Выпускник аспирантуры факультета автоматики и вычислительной техники Новосибирского государственного технического университета Алексей Приходько не слышит с рождения. Но молодой человек не только смог получить высшее образование, но и решил создать автоматический онлайн-переводчик с русского жестового языка, чтобы расширить возможности глухих людей.
    389
  • 22/05/2019

    IT-платформа будет презентована на конференции "EdCrunch" в Томске

    ​Разработанная в НГТУ НЭТИ IT-платформа для профессионального самоопределения школьников будет презентована на Международной образовательной конференции "EdCrunch" в Томске. Презентация программы для тестирования школьников на способности к цифровой экономике станет одним из главных событий крупнейшей сибирской конференции по новым образовательным технологиям, а уже в июне 2019 года программа станет доступна для скачивания на мобильные телефоны в Google Play или App Store.
    798
  • 08/10/2019

    Владимир Путин отметил востребованность электронного переводчика с языка жестов

    Аспирант НГТУ НЭТИ Алексей Приходько рассказал президенту России Владимиру Путину о своем проекте — программе-переводчике русского жестового языка. Встреча президента и молодого ученого произошла вечером 4 октября на наблюдательном совете организации «Россия — страна возможностей» в Сочи.
    770
  • 23/01/2020

    Программа молодого ученого НГТУ НЭТИ позволит сократить расходы ТЭЦ на топливо и уменьшить аварии на теплосетях

    ​Ученый факультета энергетики (ФЭН) университета разработал программу, которая позволяет увеличить время службы трубопроводов, эффективность тепловых электростанций и сэкономить около 16 тысяч тонн условного топлива в год на одной ТЭЦ.
    451
  • 12/08/2019

    В Новосибирске разработали автономную систему сбора данных по экомониторингу

    ​Новосибирские разработчики создали автономную систему сбора данных с датчиков экологического мониторинга, которая отличается от применяемых систем тем, что не требует ручного сбора информации с приборов, а также способна отслеживать точное местоположение датчиков и время показаний, кроме того, систему можно применять в энергетике и других отраслях.
    563