Цифровые аватары, голос и перевод видео
Комплекс решений для диалога с цифровыми аватарами в реальном времени, естественной русской речи и онлайн-перевода видео с синхронизацией губ. Интерактивные экраны с продолжением разговора на телефоне посетителя.
Задача
Разработать комплекс решений для естественного голосового общения, перевода видео и диалога с цифровыми персонажами в реальном времени.
Голос и видео
Реализованы перевод и озвучка видео с сохранением характера голоса и синхронизацией артикуляции. Работа с естественной русской речью объединена с генерацией видео, мимикой и эмоциональной подачей аватара.
Интерактивные экраны
Программа для панелей и киосков поддерживает голосовой диалог и управление кнопками. Разговор можно продолжить на телефоне посетителя.
В отсутствие посетителей экран показывает материалы владельца, а при их появлении переключается в диалог. Личные ответы передаются на телефон по коду с экрана.
Управление сетью
Персонажи, знания, сценарии и расписания настраиваются удалённо для отдельных мест и групп экранов. Система собирает статистику вопросов, ответов, которые не удалось сформировать, и действий посетителей.