• ПоискГлавная
  • Подписаться на НовостиНовости
  • Подписаться на СтатьиСтатьи
  • Подать объявлениеГазета
  • Доска объявлений
  • Подать объявление на сайт
  • Академгородок
  • О нас
  • Афиша
  • Прайс
  • Юридическая информация
  • Политика конфиденциальности
  • Карта сайта
  • Написать в редакцию
  • Войти
  • 10:58 вторник, 15 октября
    Академгородок:
    Пробки: 6 баллов
    15.10.2024
    USD: 96.1
    EUR: 105.49
    Мы в соцсетях:
    Подписаться на Статьи
  • Происшествия
  • Человек и общество
  • Государство и власть
  • Наука и образование
  • Культура и спорт
  • Животные
  • Письма
  • Даты
  • Без рубрики
  • 25 января - Татьянин день
  • 26 января – Международный день таможенника
  • 23 февраля – День защитника Отечества
  • 15 марта - День защиты прав потребителей
  • 12 апреля – День космонавтики
  • 9 мая – День Победы!
  • 12 мая – Всемирный день медицинских сестер
  • 31 мая – Всемирный день отказа от курения
  • 1 июня – Международный день защиты детей
  • 8 июня – День социального работника
  • 22 июня – День памяти и скорби
  • 29 июня - День изобретателя и рационализатора
  • 27 июля – День работника торговли
  • 9 августа – День строителя
  • 5 октября - День учителя
  • 23 октября – День работника рекламы
  • 10 ноября – День сотрудника ОВД
  • 22 ноября – День матери
  • 65 лет Великой Победе
  • К 70-летию Великой победы
  • В колонне бессмертного полка
  • Юбиляры победного года
  • Советскому району – 60
  • К 100-летию ВЛКСМ
  • 22 декабря – День энергетика
  • К 120-летию академика М.А. Лаврентьева
  • К Дню автомобилиста
  • К 110-летию генерала-строителя Н.М. Иванова
  • Спецпроект
  • Старые рубрики
  • Здоровье и медицина
  • «ЗНАЙ НАШИХ». НАРОДНЫЙ ПРОЕКТ
  • Переводчик жестового языка

    Переводчик жестового языка

    Переводчик жестового языка

    Студент 3-го курса Института интеллектуальной робототехники НГУ Ярослав Чеканов создал программу RSL Interpreter, которая позволяет переводить жесты в текст.

    Демоверсия создана на основе технологий искусственного интеллекта. Приложение работает на персональных компьютерах в режиме реального времени и на мобильных устройствах. Пока поддерживает только дактиль (жестовую азбуку), в дальнейшем Ярослав планирует доработать модель, сделав её более устойчивой, добавить больше жестов для перевода и обратный перевод – из текста в жесты и с голоса в жесты.

    В Институте интеллектуальной робототехники НГУ студенты с третьего курса начинают работать над реальными проектами, которые направлены на решение задач индустриальных партнёров и социально значимых задач. В программе обучения есть спецпредмет «Управление производственным процессом и разработка программного обеспечения». В процессе обучения студенту и пришла идея разработать что-то новое, при этом связанное с искусственным интеллектом.

    – Для создания приложения, над которым я работал самостоятельно, мне пришлось изучить русский жестовый язык, – рассказал Ярослав. – Очень трудоёмкой была задача собирать огромный датасет (массив данных для обучения модели) и сделать тестовое решение на нём. Однако оно оказалось удачным. Потом собрал приложение в исполняемый файл. Оно читает изображение с видеокамеры до момента, пока не будет закончен перевод, который в дальнейшем выводится на экран.

    Подобное решение на рынке предлагает СБЕР, но в разработке Ярослава использована другая архитектура, а само приложение работает быстрее, результат перевода более точный.

    Этот проект не только способствует инклюзивности, но и открывает новые возможности взаимодействия для людей с ограниченными возможностями. Он может быть интересен специалистам в области обучения жестовому языку, машинного обучения и лингвистам, изучающим эту форму коммуникации.

    Как говорит студент, во многом ему помог наставник – Михаил Витальевич Филиппов. Благодаря ему Ярослав пришёл к уникальному решению сложной задачи.

    Уже готовы версии приложения для компьютера и телеграм-бот, которому можно присылать видео для перевода. Также недавно Ярослав завершил разработку мобильного приложения.

    По информации пресс-службы НГУ

    Другие статьи на тему

    Человек и общество
    Шлюз превращается в болото
    737 1
    "Навигатор" № 40 (1462) от 11.10.24
    Человек и общество
    Внимание на светофор!
    358 0
    "Навигатор" № 40 (1462) от 11.10.24
    Человек и общество
    Знатоки в финансах
    437 0
    "Навигатор" № 40 (1462) от 11.10.24
    Человек и общество / Встреча с интересным человеком
    «Поэзия травмоопасна!»
    360 3
    "Навигатор" № 40 (1462) от 11.10.24
    Человек и общество / Школа для родителей
    Обозвали нищебродом
    331 1
    "Навигатор" № 40 (1462) от 11.10.24
    Человек и общество / Уроки безопасности
    Фальшивые медуслуги
    321 0
    "Навигатор" № 40 (1462) от 11.10.24

    Популярное