В этом году стал доступен Unreal Engine 5. Это условно-бесплатный набор инструментов для создания 3D-объектов и полноценных игровых миров в реальном времени. Как и некоторые другие движки, его используют не только для игр, но и в архитектуре, обучающих симуляциях и много где ещё. Но сегодня именно Unreal Engine меняет привычный пайплайн создания фильмов и анимации. Рассказываем, как это работает.
Кино
Зелёный фон долгое время был обязательным для создания визуальных эффектов в кино, и эта технология всё ещё широко используется. Актёров снимают на одноцветном фоне, на монтаже его вырезают, и получают сцену с прозрачным фоном. Теперь её можно наложить на нужный фон, который или отснят отдельно, или «нарисован». Ещё в зелёный закатывают предметы, которые нужно на посте заменить на что-то другое. И людей, которые перемещают что-то, что в кадре должно перемещаться само.
https://thecglab.com/breaking-down-the-plate-for-avengers-endgame-inside-the-vfx-animation-process/
Взаимодействуй со шваброй так, будто это дракон
Технология позволяет поместить актёров в фантастическую локацию, создать убедительные взрывы и превратить швабру в дракона. Но тут есть слабые места, которые добавляют процессу сложностей. Идеально совместить освещение отснятой сцены и её цифрового расширения, да и вообще правдоподобно совместить всё со всем — процесс долгий и трудоёмкий. Нужно избавляться от зелёных отражений и заменять их нужными. Долгое время эволюционировал постпродакшен, и качество визуальных эффектов улучшалось за счет технологий, которые не затрагивали съёмочную площадку. Но сейчас происходит революция.
https://www.unrealengine.com/en-US/spotlights/unreal-engine-in-camera-vfx-a-behind-the-scenes-look
Новый вид магии пришёл в кино: окружение рендерится прямо во время съёмки. Это ломает привычный пайплайн. Теперь можно создать нужный фон и не просто снимать сразу на нём, но и вносить в него изменения прямо во время съёмки, что сильно упрощает этап постпродакшена. Так как созданное в Unreal Engine окружение транслируется на LED панели вокруг съёмочной площадки, оно работает ещё и на освещение сцены. Зелёные отражения и блики вычищать не придётся.
Как это работает
Зелёный фон заменили полукруглая LED стена и потолок. Экран окружает всю съёмочную площадку и позволяет вести съёмку под любым углом. Используется камера с трекером, определяющим положение в пространстве. Виртуальная камера внутри движка подцепляет положение и наклоны реальной камеры, физическая и виртуальная реальности синхронизируются. Таким образом, если камера перемещается вместе с персонажем, перспектива окружающей среды перемещается вместе с камерой.
Это полезно, когда у вас есть кадр с быстро движущимся персонажем в масштабном окружении. Например, вот кадр, на котором Куиил едет на бларрге с Малышом Йодой в руке. Экраны окружают актера и позволяют плавно изобразить его скачущим по пустыне.
Другой пример: стыковочный отсек корабля Ранзара Малка. Локация детализированная и оживлённая, люди ремонтируют корабли, летят искры. Потребовалось бы много места и реквизита, а ещё большая съемочная группа, чтобы воплотить эту декорацию в жизнь. Но здесь она создана в цифровом виде, и только на первом плане окружение построено физически, что помогает смешать реальное с цифровым. Такая смешанная среда создаёт бонус и для актёров: проще играть, когда ты действительно видишь всё, что происходит вокруг, а не представляешь.
Когда зеленый фон всё-таки необходим, его можно включить на части стены за персонажем. При этом остальное окружение остаётся на месте, отражения на персонажах и предметах — тоже. Это используется в сценах со взрывами, например.
Собрали несколько видео, в которых показывают, как это всё работает, на примере съёмок «Мандалорца»:
Лид композер говорит, что предпочла бы никогда не возвращаться к зелёному экрану:
XYZ рассказывают на русском и показывают, как Play Production используют технологию в России:
А вот видео от австралийской студии. Горящий лес — сложная локация. Это даже не взрыв на втором плане. Всё горит прям тут, не где-то на безопасном расстоянии, огонь распространяется быстро, а рисовать на посте освещение от пожара долго и сложно. Для сериала Fires подожгли цифровой лес. В этот же лес отправили цифровую пожарную машину. Актёров в кабине физической машины снимали на фоне LED стены, добавив настоящего жара дозированно и безопасно. Но актёры получили полное погружение.
Следующее видео для тех, кто любит не только смотреть, но и делать. Объясняют, как повторить эффекты из Мандалорца буквально у себя дома при минимальном сетапе. Минимальный сетап не включает LED стены, так что с совещением придется повозиться. Но возможность сделать такое вот прямо на коленке — это огонь.
Анимация
На движке создают фотореалистичные синематики и стилизованные мультфильмы. Тут не используются такие впечатляющие штуки, как LED циклорамы, но пайплайн становится удобнее, а мульты — круче.
Zafari — тв шоу, полностью сделанное на UE. И оно выглядит гораздо круче привычных мультсериалов. Похоже, что работать над такими мультиками тоже приятнее. Как сказал о переходе на UE режиссёр: «Закончить анимацию, и через десять минут увидеть готовый рендер? Я в деле».
В следующем ролике о работе рассказывает команда проекта Super giant robot brothers! Похоже, они в восторге: делать мульт в UE — всё равно, что снимать внутри игры. В которой можно взять и подвинуть солнце вот прямо сейчас. А актёры во время съёмки видят себя на экране уже в качестве персонажей.
Дальше будет круче
Unreal Engine — огромная песочница с кучей инструментов. Использование ограничивается только воображением и желанием пробовать новое. Давайте играть, там интересно.