Инженеры Массачусетского технологического института только что представили миру новую видеотехнологию, позволяющую получать "отзывчивые" кадры.
Записав лишь небольшой фрагмент, мы получаем материал, который открывает множество возможностей. Идя на шаг дальше технологии дополненной реальности, интерактивное динамическое видео (IDV) позволяет использовать традиционную камеру для создания реалистичных спецэффектов.
Что представляет собой полученное интерактивное видео??
Это материал, позволяющий имитировать реалистичное движение записанного объекта в соответствии с нашей волей — с помощью специальной программы мы можем анимировать уже записанный объект в реальном времени.
Для чего мы можем его использовать?
Технология открывает новые возможности, в основном в инженерном деле и искусстве.
Архитекторы, например, могут использовать ее для проверки структурного состояния зданий или мостов, моделируя поведение объектов под воздействием различных физических сил. Малобюджетные кинематографисты могут использовать ее для создания реалистичной компьютерной графики.
Как объясняют авторы идеи, одна из главных проблем современных методов компьютерной анимации заключается в том, что анимированный компьютером объект "вставляется" в мир, снятый традиционной камерой. В результате графика не может взаимодействовать с фоном, в который она встроена, поскольку отдельные части изображения были созданы отдельно.
Например, сгенерированный компьютером динозавр не может заставить окружающие деревья (снятые обычной камерой) дрожать при его движении. Сейчас эта проблема решается путем наложения на изображение ряда последовательных объектов, созданных компьютером, которые затем соответствующим образом анимируются.
Как это работает?
Разработанная инженерами Лаборатории компьютерных наук и искусственного интеллекта (CSAIL), эта технология позволяет найти иное решение. Захватив, например, короткий фрагмент видео с движущимся объектом. Например, если дерево вибрирует на ветру, мы подаем материал в специальную программу, которая анализирует это движение.
Соответствующие алгоритмы исследуют мельчайшие, почти невидимые колебания объекта, что позволяет нам создать видеосимуляцию естественного движения. В результате пользователи могут взаимодействовать с видео с помощью курсора, растягивая изображение в разные стороны, вызывая на экране реакцию, естественную для объекта.
"Мы не очень хорошо умеем создавать взаимодействия между реальными и виртуальными объектами. Вставка виртуальных персонажей в реальный мир может быть гораздо более реалистичной, если позволить им реалистично взаимодействовать".
Техника анализа движений также позволяет предсказывать поведение объектов.
"Если вы хотите предсказать реакцию объекта на различные силы, вы можете наблюдать за его реакцией на существующие силы, предполагая, что он будет реагировать аналогичным образом на новые".
О том, как именно работает технология, разработчики рассказывают в видеоролике ниже:
