HoloLens от Microsoft переводит «на лету»

Демонстрации Microsoft, касающиеся HoloLens, не всегда были впечатляющими, но новый на мероприятии опыт от компании- это не что иное, как удивительное чудо.

Используя комбинацию технологий захвата тела и голоса, Azure AI и HoloLens, Microsoft создала почти фотореалистичную голограмму исполнительного Джулии Уайт, а затем голограмма доставила часть лейтмотива Уайта на японском языке — языке, на котором реальный человек не может говорить.

Демонстрация состоялась, когда Уайт носила гарнитуру HoloLens, ходила и наблюдала в 3D-пространстве за своим клоном. Она начала с того, что вызвала в воображении “мини-меня”, которое можно было смутно “держать” в руке. После небольшого расцвета сверкающих зеленых спецэффектов кукольная копия превратилась в полноразмерный клон, который начал говорить на иностранном языке, используя образцы голоса Уайта, чтобы говорить предложения, которые были машинно переведены на японский язык.

Требуется всего лишь мгновение, чтобы понять огромный потенциал новой технологии, предполагая, что она работает на практике так же легко, как и в демо. Оснащенный надлежащим оборудованием для сканирования глубины 3D — камеры и инструментами перевода с помощью AI, любой докладчик может быстро создавать правдоподобные, региональные выступления-основной доклад может быть предварительно записан и показан одновременно на 30 языках. Конечно, та же самая технология может быть использована для менее позитивных целей, подделывая слова или действия, которые не были бы получены из модели сканирования тела.

На данный момент для достижения этой цели требуется доступ к некоторым аппаратным средствам профессионального калибра, начиная от высококачественных специализированных камер и заканчивая дорогими гарнитурами HoloLens. Но аналогичные технологии сканирования тела, как ожидается, пробьются в смартфоны следующего поколения в течение следующего года или около того, что может создать условия для просмотра фотореалистичных аватаров на их экранах или на потребительских AR-гарнитурах. Принесет ли Microsoft эту концепцию в свою собственную инициативу по гарнитурам смешанной реальности, еще предстоит выяснить.

Оставайтесь в курсе последних новостей виртуальной реальности вместе с VRGeek.

ДалееНовые бесплатные треки для Beat Saber выйдут на этой неделе

Комментарии

You must log in to post a comment