SwipeTalk Air превратит речь в 3D-изображение

Mitsubishi Electric разрабатывает SwipeTalk Air — интерфейс и приложение для мгновенного отображения речи в виде 3D-текста при видеозаписи в реальном времени

Как сообщили в пресс-службе компании, разрабатываемая технология позволяет использовать дополненную реальность для «живого» видеообщения в социальных сетях. По словам авторов решения, SwipeTalk Air стал первым в мире интерфейсом на основе технологии дополненной реальности для мгновенного отображения произнесенной речи в виде трехмерного текста при записи видео в режиме реального времени.

Чтобы превратить речь в 3D-картинку достаточно провести пальцем по экрану планшета или смартфона. Технология легла в основу приложения для мобильных гаджетов на базе iOS, которое интегрирует пользовательский интерфейс, видеозапись и другие функции для создания «живых» видео в социальных сетях.

Пользовательский интерфейс мгновенно отображает произнесенные слова в виде 3D-текста на видео, как только оператор проводит пальцем по экрану мобильного устройства. Камера устройства направляется на объект съемки, произносится несколько слов, на экране пальцем проводится линия, после чего в этой области немедленно появляется текст.

Человек говорит, а оператор проводит пальцем по экрану, чтобы мгновенно отобразить 3D-текст в видео

Запись видео и редактирование полностью интегрированы, поэтому пользователи могут вести съемку и вводить текст одновременно. Размещение текста возможно в любом месте виртуального пространства экрана.

Также в ходе видеозаписи можно использовать дополнительные иллюстрации. Кроме того, размещенный текст можно мгновенно перевести на иностранный язык. Поддержка аудио при переводе отображаемого текста позволяет общаться и взаимодействовать с людьми, говорящими на других языках.

Технология была продемонстрирована на выставке цифровых технологий SXSW в Техасе. По словам разработчиков, в будущем возможности управления и функции пользовательского интерфейса и приложения будут расширены для использования в коммерческих товарах и сервисах.

Иллюстрация на обложке: pixabay.com

3D
Mitsubishi Electric
распознавание голоса
Технологии Источник