Новые инструменты для видео маппинга, 3D сканирование и прочее
3D сканирование, компьютерное зрение и цифровой медиа гуру Кайл Макдональд снова вернулись с еще большим количеством инструментов, разрушающих границу между компьютером и миром. Кайл говорит, что провел большую часть осени в резиденции Центра искусств и медиа Ямагучи (YCAM) в Японии. Он работал с экспериментальными устройствами проекторов/камер – и теперь мы можем насладиться плодами его трудов.
Набор софта бесплатен и имеет открытый исходный код (лицензия MIT), создан для OpenFrameworks, и уже включает в себя некоторую документацию.
Mapamok
Основной темой является новый экспериментальный инструмент для проекционного маппинга, называемый Mapamok. Кайл объясняет: «Основной идеей было избавить людей от кликов по многим точкам и рисования многочисленных масок. Вместо этого вы загружаете 3D модель сцены и потом кликаете по небольшому количеству точек (8-12), и вся проекция будет автоматически откалибрована.»
Автоматический маппинг и калибровка? Звучит здорово.
Данный инструмент абсолютно бесплатный, как часть ProCamKit. Здесь вы можете скачать его и посмотреть документацию (на английском):
http://github.com/YCAMInterlab/ProCamToolkit/downloads
http://github.com/YCAMInterlab/ProCamToolkit/wiki/mapamok-%28English%29
Вот описание видео с верха страницы:
Mapamok - экспериментальное приложение для проекционного маппинга, которое является частью Projector Camera Toolkit, разработанного в рамках Guest Research Project v.1 в лаборатории YCAM.
Это видео демонстрирует рабочий процесс быстрого проекционного маппинга включающий: измерение и моделирование сцены (5-30 минут) сопровождаемое установкой и калибровкой проектора (5 минут). Благодаря тому, что mapamok создан в openFrameworks, все обрабатывается в реальном времени. Это позволяет данной технике быть расширенной с помощью интерактивных приложений. Ближе к концу показан пример аудио-визуального интерактивного маппинга.
Но есть в этом наборе еще кое-что классное:
3D сканирование совмещается с проекцией
«3D сканирование + проекция – это то, что я считал возможным еще давно, когда я начинал работать со структурированным светом », объясняет Кайл. «Элиот Вудс также сделал прекрасную работу, используя Microsoft Kinect для изменения освещения».
В дополнение к 3D сканированию и концепции «структурированного света» Кайла – эффект, который мы видели в некоторых музыкальных видео. Все на сайте Google Code, от кода до обсуждения:
http://code.google.com/p/structured-light/
Музыка: “Hoofbeat” от Dustmotes (http://soundcloud.com/dustmotes/hoofbeat-disquiet0002-duet)
Это видео демонстрирует экспериментальное приложение для проекционного маппинга, которое является частью Projector Camera Toolkit, разработанного в рамках Guest Research Project v.1 в лаборатории YCAM.
Во-первых, сцена (череп) была отсканирована, используя код «структурированного света». Данные сканирования были преобразованы в трехмерное облако точек. Это возможно благодаря тому, что камера и проектор откалиброваны, а их расположение и направление заранее известны. На 33 секунде представлена краткая демонстрация редактирования GLSL шейдера в реальном времени, когда незначительное изменение меняет ширину проецируемых линий. Затем снова можно видеть череп, со спроецированными на него изображениями.
Shadowplay
«Я уверен, что работа shadowplay никогда не была выполнена именно так», говорит Кайл. «Это первые шаги на пути к более масштабному проекту, который я запланировал». Сложно объяснить, но идея состоит в том, чтобы объединить проекторы, а затем, используя белый свет, испускаемый двумя проекторами, манипулировать тенью так, как невозможно физически. Это очевидно всего лишь первый шаг, но вы можете видеть в нем мощный потенциал, который возможно разовьется по нескольким разным путям.
Также весьма интересно слышать музыку Кайла (http://soundcloud.com/kyle-mcdonald/), которая прекрасна. Интересно, есть ли направление в цифровом медиа, в котором не работает Кайл?
Shadowplay отображает экспериментальный принцип взаимодействия, построенный с помощью Projector Camera Toolkit, разработанного в рамках Guest Research Project v.1 в лаборатории YCAM.
Это видео демонстрирует несколько экспериментов, основанных на идее использования двух идеально совмещенных проекторов. Проекторы отображают одинаковое, но инвертированное изображение, которое при отсутствии препятствий видится на экране белым. Когда в пространстве появляется объект, спрятанная в проекции структура проявляется в тени. Техническая сложность выравнивания проекторов и калибровки цветов проекции решена с помощью Projector Camera Toolkit, используя сканирование и некоторые новые техники калибровки.
http://github.com/YCAMInterlab/ProCamToolkit
