руппа студентов Томского госуниверситета систем управления и радиоэлектроники разрабатывает устройство, которое "переведет" язык жестов в слова и озвучит их. 

«Людям, которые не могут говорить, сложно общаться с теми, кто не понимает языка жестов. Мы хотим попробовать упростить им общение», – рассказал один из разработчиков проекта студент второго курса факультета электронной техники Никита Дерябин.

Для решения этой задачи молодые учёные планируют создать аудиоассистент, состоящий из двух основных компонентов: специальных перчаток и программного обеспечения, которое будет установлено на мобильном устройстве.

Значительная часть работы над проектом уйдёт на создание самих перчаток. Планируется, что они будут оборудованы датчиками сгиба, Bluetooth-модулями, контроллерами и динамиком. Когда человек начнёт говорить на языке жестов, датчики сгиба и акселерометры зафиксируют положение его пальцев и рук, эту информацию считает сначала контроллер на одной руке и передаст с помощью Bluetooth-модуля на более мощный контроллер на второй руке, где произойдёт синхронизация информации с датчиков обеих рук. Далее полная информация о движении рук и пальцев человека через другой Bluetooth-модуль поступит, например, на смартфон, где специальная программа «прочитает» жесты и переведёт в слова. Последним этапом станет озвучка полученных данных посредством динамиков, установленных на перчатках.

При этом студентам необходимо не просто создать рабочее устройство, но и сделать так, чтобы аудиоассистент был действительно удобен для немых людей. Поэтому, помимо основных вопросов, таких как создание программы, способной обработать и распознать жесты, синхронизация всех датчиков и так далее, нужно найти решения и для дополнительных. Например, как разместить всё оборудование на двух руках и при этом не сделать перчатки слишком громоздкими.

«Для перчаток будем искать определённый материал, чтобы статики не было, чтобы и летом можно было ходить, и зимой тепло было. Мы хотим сделать так, чтобы устройство работало без перебоев и потерь и при температуре минус 40 градусов, и в жару», – пояснил Никита Дерябин.

В настоящий момент разработчики находятся на начальном этапе работы над проектом. Недавно в распоряжение студентов поступили первые части необходимого оборудования – Bluetooth-модули. Следующая партия – датчики сгиба. Это сложное оборудование размером от 5 до 10 сантиметров, которое используется в авиастроении, с его помощью определяется степень деформации крыльев самолётов.

«Сейчас ещё идёт сбор информации и первые попытки что-то сделать самим. Пока речи не идёт о том, чтобы первый пробный экземпляр был красивым, он должен быть рабочим. Это в материальном плане сложно без инвесторов. Но тем не менее первый образец может появиться уже через год», – добавил научный руководитель проекта кандидат технических наук Денис Пахмурин.

Помимо технической части работы над аудиоассистентом, разработчики планируют провести подробный опрос среди целевой аудитории проекта, чтобы понять, насколько люди заинтересованы в таком устройстве, и как сделать его максимально полезным и удобным в использовании.

Похожие новости

  • 09/01/2017

    ТГУ создает 3D-фильм о раскопках курганов в тувинской Долине царей

    ​Сотрудники Томского госуниверситета (ТГУ) планируют в 2017 году выпустить фильм в 3D об археологических раскопках в тувинской Долине царей, сообщила РИА Томск завлабораторией "Артефакт" Ольга Зайцева.
    262
  • 07/07/2016

    В ТПУ разработали универсальный порошок для дактилоскопии

    ​Универсальный порошок для дактилоскопии разработали в Томском политехническом университете. Авторами идеи стали студенты Энергетического института ТПУ. Основные преимущества новой разработки - получение более четкого следа отпечатка и универсальность.
    559
  • 17/10/2016

    Систему безопасного хранения водородного топлива разрабатывают в ТПУ

    ​Магистрант Томского политехнического университета (ТПУ) занимается созданием безопасной системы хранения водородного топлива. В этой системе водород "упаковывается" в углеродные таблетки, благодаря чему исключается риск его самопроизвольного взрыва.
    366
  • 11/01/2017

    Топливный бак для водородного транспорта сохранит атмосферу Земли

    Массовый перевод автомобилей на водородное топливо позволит сократить эмиссию углекислого газа в атмосферу Земли - ведь при сжигании водорода образуется вода.  Однако широкого распространения "водородомобили" пока получить не могут, прежде всего, из-за отсутствия безопасных и удобных способов хранения водорода в топливной системе транспортного средства.
    280
  • 06/07/2016

    В Томском политехе разработали агроробота

    Ученые Юргинского технологического института (ЮТИ) Томского политехнического университета вместе со студентами разрабатывают агроробота, который сможет пахать землю, обрабатывать растения от вредителей и косить траву.
    618
  • 20/09/2016

    В Сибири наладят производство бериллия по технологии ТПУ

    Промышленный партнер Томского политехнического университета (ТПУ) компания "Редкие металлы Сибири" планирует в 2018 году организовать первый этап производства бериллия по разработанной политехниками технологии в Забайкальском крае, для второго этапа рассматривается площадка Сибирского химкомбината (СХК) Росатома в Томской области, сообщил ​ РИА Томск проректор по науке Александр Дьяченко.
    395
  • 25/04/2017

    Биореактор для водорослей создали молодые ученые ТПУ

    ​Молодые ученые Томского политехнического университета создали биореактор для выращивания одноклеточных водорослей, таких как хлорелла.  Благодаря правильно подобранному режиму освещения и поддержанию других необходимых для культивирования условий установка позволит за 12 часов получить до 400 литров смеси водорослей и воды.
    88
  • 21/02/2017

    Разработки ТПУ для имплантологии выходят на стадию клинических испытаний

    ​Биодеградируемые имплантаты Томского политехнического университета выходят на стадию клинических испытаний. Как сообщают ученые ТПУ, на стадии доклинических исследований эффективность томских изделий уже доказана, и сегодня некоторые биоразлагаемые имплантаты Томского политеха сегодня частично используются в медицинской практике в одном из ведущих ортопедических центров России - Центре Илизарова.
    312
  • 04/10/2016

    В Airbus Safran Launchers заинтересовались созданным в Томске наноматериалом

    ​Airbus Safran Launchers (совместное предприятие авиакосмического концерна Airbus Group и французской корпорации Safran) заинтересовалась разработанной в Томском госуниверситете технологией получения наноматериала - легкого, как алюминий, и прочного, как сталь, сообщил завлабораторией высокоэнергетических и специальных материалов ВУЗа Александр Ворожцов.
    456
  • 28/06/2016

    3D-технологии завоевывают мир

    ​Вслед за автомобилями с автопилотом на дороги выходят самоуправляемые маршрутки. Первенцем новой концепции стал микроавтобус "Olli", созданный компанией Local Motors в сотрудничестве с IBM.  Как сообщает 3Dtoday, Local Motors наиболее известна в качестве первого производителя 3D-печатных автомобилей, а IBM предоставила необходимое аппаратное и программное обеспечение для интеграции 3D-печатного транспорта в облачный искусственный интеллект IBM Watson.
    742