Facebook Reality Labs представили технологию зеркальной реконструкции

Еще в мае было объявлено, что Oculus Research, R&D подразделение компании Facebook, потерпел ребрендинг и приобрел имя Facebook Reality Labs. Сегодня, новая лаборатория делала свое первое большое объявление с момента изменения имени, вводя новую технологию реконструкции зеркала.

При создании реалистичной сцены одним из самых сложных элементов являются зеркала и стеклянные панели. Поэтому Facebook Reality Labs создала новый полностью автоматизированный метод для реконструкции зеркал и других отражающих плоских поверхностей, который она будет обсуждать на SIGGRAPH 2018 в этом месяце.

Подробно описывая исследования в блоге Oculus, команда подчеркивает успехи, достигнутые по сравнению с существующими системами 3D-сканирования.

«Если вы посмотрите вокруг зеркальной секции магазина домашнего декора, вы сразу увидите широкий спектр форм и размеров—почти нет двух одинаковых зеркал! Нам очень рано стало очевидно, что нам нужно общее решение для реконструкции в этом плане. Нам очень хотелось, чтобы решение работало только в реальных условиях, потому что именно там оно наиболее полезно», – рассказывает ученый-исследователь Томас Уилан.  

Всегда ли отражение правдиво?

«Огромное разнообразие типов и форм зеркал было довольно ошеломляющим в начале. Разработка системы, которая могла бы обрабатывать большинство или все зеркальные формы и размеры, была главной целью. Потом мы поняли, что система также будет работать со стеклянными поверхностями с небольшой дополнительной модификацией. Это было довольно круто», –  отметил ученый-исследователь Джулиан Штрауб.  

Они узнали, что, идентифицируя зеркальные поверхности, они могут затем повторно отрисовать сцену с правильной геометрией и отражениями. Это привело к созданию установки захвата, которая включала инфракрасную камеру захвата глубины, цветную камеру RGB, две камеры SLAM, инфракрасный проектор и специальную цель, которую система могла идентифицировать. Это позволило идентифицировать границу зеркал даже без рамки.

Метод действия системы можно увидеть на видео ниже:

Комментарии

You must log in to post a comment