Momentum – интерактивный фреймворк для создания видеообразов на основе движений тела

Momentum  - это интерактивный фреймворк для преобразования звуков и движений тела в видеообразы. Фреймворк разработан Schnellebuntebilder и Kling Klang Klong.

Идея создать инструмент реального времени для анализа движений пришла разработчикам ещё в 2013 году на мероприятии «Choreographic Coding». И они достаточно быстро воплотили её в жизнь. Движения человеческого тела преобразуются в траектории движения для двух миллионов частиц.

Траектории зависят от интенсивности и направления движений человека. Все вычисления осуществляются посредством GPU. Исходными данными для расчёта траектории служат двумерные и трехмерные данные, полученные при отслеживании движений (так называемый, скелет или оптический поток).

Затем эти данные проходят обработку в программе на базе vvvv. Обработанные таким образом данные направляются в звуковой фреймворк “MOTIONKLONG” от студии Kling Klang Klong. Этот фреймворк работает на базе Max.

На этом этапе данные преобразуются в звуки. Некоторые параметры звука настраиваются в Ableton Live.

Подробную информацию смотрите на странице проекта.