Лаборатория «Сенсор-Тех» в сотрудничестве с киностудией «Союзмультфильм» создают уникального 3D-персонажа, анимированного на основе жестов реального специалиста. Он станет виртуальным сурдопереводчиком в цифровом сервисе для глухих и слабослышащих «СУРДО-ПОМОЩЬ». Работа над подобным проектом – первый опыт как для Лаборатории, так и для киностудии. Мы с нуля разрабатывали алгоритмы действий и подбирали нужные технологии.
В настоящее время команда Лаборатории уже начала обработку записанных жестов, очищая их от лишнего шума, улучшая артикуляцию и доводя каждый жест до эталона. Далее мы планируем тестировать распознаваемость жестов с глухими пользователями.
«Наша задача — сделать так, чтобы сурдопереводчик был максимально реалистичным. Для этого мы каждый месяц записываем и добавляем в базу все больше жестов. Кроме съемок в студии, огромная работа проводится и внутри команды: каждый жест обрабатывают программисты и 3D-дизайнеры», – сказал Денис Кулешов, директор Лаборатории «Сенсор-Тех».
«СУРДО-ПОМОЩЬ» – уникальный онлайн-помощник для глухих и слабослышащих. Основные возможности сервиса – перевод речи в текст, видеосвязь с сурдопереводчиком и виртуальный сурдоперевод. Платформа будет доступна уже в 2024 году и станет одним из самых удобных и масштабных российских сервисов для пользователей с нарушенным слухом.
«СУРДО-ПОМОЩЬ» разрабатывается при поддержке РФРИТ.
«СУРДО-ПОМОЩЬ» разрабатывается при поддержке РФРИТ.