2 марта четверг Съемка репортажа “Смешанная реальность” для канала Технофак



Съёмка с Ульяной Долгиной в ЕАСИ.

Смешанная реальность – между физической и виртуальной. Добавляет к реальным объектам виртуальное цифровое изображение и получается синхронизация реального объекта с окружающим его изображением, когда вокруг реальных объектов на поверности дорисовываются его следы или другие цифровые артефакты, либо изображение на самом объекте. Сейчас осуществляется с помощью проектора, или экрана. Основное внимание уделил процессу быстрой калибровки.
  • 2D случай, дополнение реального объекта виртуальным окружением. На примере 2D-случая, когда объект можно считать плоским и он движется в плоскости. Можно осуществить обычной веб-камерой, калибровав по 4-м точкам (углы изображения)
  • Динамический мэппинг, то есть видеомэппинг на поверхность движущегося объекта. проецируется изображение с помощью проектора. Можно осуществить с помощью камеры глубины типа Kinect (использовали в репортаже Kinect2). Я рассказал про новый способ калибровки по 6 точкам: углы проекции (когда работаем у стены, это углы картинки с проектора, иначе – подставляем лист бумаги и ловим углы сетки, выдаваемой проектором), центр проекции, и еще одна точка из центра проекции, которая расположена на некотором удалении от первой (0.5-1 м). Также, для калибровки требуется знание о расстоянии от проектора до центра проекции. В процессе калибровки камера глубины считывает расстояния до всех 6 точек и по ним строит модель проектора – его расположение в пространстве. Такой метод позволяет нам за несколько минут калибровать камеруи проектор перед выступлениями. Он реализован в программе KuStar, которую мы разработали для концерта Барокко и используем в последующих работах.

DENIS PEREVALOV, EKATERINBURG, RUSSIA.