Умный помощник для незрячих и слепоглухих «Робин» построен по модульному принципу для простоты производства и отладки. В основе устройства лежит двухплатная управляющая система, в которой наиболее важные функции, в том числе получение от пользователя команд в виде нажатий кнопок и обратная вибрационная связь, переданы программе реального времени на микроконтроллере. основе всех методов решения, связанных с искусственным интеллектом, лежат принципы обучения и использования нейронных сетей.

Получен патент на устройство в России № 2020112614/14(021355) от 27.03.2020 г. «Портативное устройство захвата и распознавания зрительных образов».

«СУРДО-ПОМОЩЬ» – это ИТ-решение для общения людей с нарушенным слухом. Сервис реализован на базе приложения (IOS/Android) а также доступен на в браузере на специализированном сайте.

Основные функции сервиса «СУРДО-ПОМОЩЬ»:
– Перевод речи в текст и обратно
Сервис распознает устную речь и переводит ее в текст, чтобы человек с нарушением слуха мог прочитать то, что ему говорят. Затем пользователь может напечатать ответ текстом, а программа озвучит его, то есть превратит в устную речь для собеседника. Это позволяет спокойно вести диалог с окружающими, не используя устаревшие способы, например, бумагу с ручкой.

– Видеоконференция с сурдопереводчиком
В любой момент слабослышащий имеет возможность позвонить переводчику русского жестового языка для решения повседневных задач, консультаций по поводу важных вопросов, а также в экстренных ситуациях.

– Виртуальный сурдоперевод
Виртуальный сурдопереводчик распознает русский жестовый язык и переводит его в текст или речь. Это работает с помощью искусственного интеллекта, который был обучен на основе собранного датасета из более чем 50 тысяч жестов.

«Чарли» – это аппаратно-программный комплекс, аппаратная составляющая которого включает в себя высокочувствительный массив микрофонов, одноплатный ПК для выполнения основных и вспомогательных алгоритмов по захвату, обработке и передаче звука, а также интерфейсные и сервисные функции, комплект плат, обеспечивающих адаптацию существующих массива и одноплатного ПК в эргономичную компактную конструкцию, а также обеспечивающих стабильное питание и недостающие цифровые интерфейсы и управляющие возможности.

ПО «Чарли» включен в Единый реестр российского ПО.

Программная составляющая отвечает за интеграцию всех аппаратных составляющих в единое целое, отвечает за организацию обмена информацией плат друг с другом, а также обмен прибора с сетевыми интерфейсами по проводному и беспроводному соединению, а также соединения по технологии Bluetooth LE для локального управления и настройки прибора с использованием приложения Чарли для платформ Andorid и iOS собственной разработки.

Мобильное приложение «Чарли» для платформы Android разработано на языке Kotlin и поддерживает версии Android от 8.0 и выше. Приложение для платформы iOS разработано на языке Swift, поддерживает версии iOS от 16.0 и выше. Приложение адаптировано для экранов смартфонов и планшетов. С помощью приложения возможно осуществлять подключение к текущему диалогу, смотреть ранее сохранённые и настраивать аппарат «Чарли».