Как создать эффект смешанной реальности без зеленого экрана

Экспериментальный проект демонстрирует способ создания эффекта смешанной реальности с применением Kinect V2 без использования зеленых экранов.

Существует несколько способов создания эффекта смешанной реальности, самым популярным из которых является использование зеленых экранов по принципу технологии хромакей. Однако разработчики-энтузиасты продемонстрировали свой вариант создания смешанной реальности, используя лишь камеры Microsoft Kinect V2.

Новый экспериментальный проест демонстрирует альтернативный метод, используя который вам не придется устанавливать зеленые экраны. Технология позволяет зрителям наблюдать за тем, что делает пользователь в виртуальной реальности, практически в любом подходящем помещении — например, на конференции, и обеспечивает вполне приемлемое качество изображения.

Видео демонстрирует два способа применения Kinect для создания эффекта смешанной реальности. В первом камера Kinect установлена стационарно. При подключении к большому экрану таким образом можно создать комфортную зону для наблюдения за происходящим в VR. Вторая камера, дополненная контроллером HTC Vive для трекинга её местоположения в виртуальной реальности, была переносной.

С одной стороны, эффективность такого метода уступает использованию зеленых экранов, так как при просмотре видео можно заметить «артефакты» изображения, сопровождающие каждое перемещение игрока. Однако применение Kinect является более простым, дешевым и практичным способом. Кроме того, данный способ демонстрирует очередное нестандартное применение периферии Microsoft — вряд ли её создатели предполагали, что когда-нибудь Kinect станет «окном» в виртуальную реальность.

Если вы хотите ознакомиться с проектом более детально, то рекомендуем посетить YouTube-канал разработчиков.