Технологии виртуального производства на ТВ и в шоу-индустрии


TDS

Екатерина Каширихина

Сегодня сложно представить кинопроизводство без использования визуальных эффектов (VFX). До недавнего времени спецэффекты достигались путем съемок на хромакее. Отдельно снимался актер, и уже на компьютере накладывалась нужная картинка. Технологии шагнули далеко вперед, и процесс съемки с VFX стал доступен прямо в камере в режиме реального времени. Гораздо проще, быстрее, удобнее и дешевле.

Это открыло возможности для широкого использования VFX на телевидении и в шоу-индустрии. Создание и распространение телевизионного или мета-телевизионного контента с применением виртуальной реальности имеет отличные перспективы монетизации и быстро набирает популярность.

В реалиях сегодняшнего дня эти технологии особенно актуальны, ведь они позволяют перевести все из области физического мира в мир виртуальный. Участникам ТВ-проектов больше не нужно приезжать в студии, их трехмерная проекция может оказываться там независимо от того, где находится сам человек. Снимать в реальных студиях и локациях также нет необходимости. Современные компьютерные программы и игровые движки создают виртуальный фон такого высокого качества, что он не отличим от настоящего.

Подробнее о новейших технологиях виртуального производства расскажет Константин Герасимов, генеральный директор компании TDS, которая занимается их развитием и интеграцией на российском рынке.

Виртуальные студии и дополненная реальность
Будущее теле- и медиаиндустрии за полностью виртуальными студиями или студиями, оснащенными дополненной реальностью. Эти технологии широко используются во всем мире, но их качество зачастую оставляет желать лучшего из-за сложности программных продуктов и дороговизны самого процесса создания.

Сегодня появилась решения, которые обеспечивают потрясающую фотореалистичность изображения. Например, Reality – компоузер, создающий конвейеры визуальных эффектов в реальном времени с вводом/выводом видео, кеингом1, компоузингом2 и рендерингом3 в одном программном пакете. Reality предоставляет пользователю полный набор инструментов для разработки иммерсивного контента. С его помощью спорителлинг в телевещании, медиа- и киноиндустрии выходит на совершенно новый технологический уровень.

Reality дает впечатляющий результат при кеинге контактных теней, прозрачных объектов и субпиксельных деталей, например, волос. Появилась возможность заходить за виртуальные объекты, дополнять реальные существующие объекты и т.п.

В Reality применяется уникальный подход, при котором изображение на хромакее комбинируется с графикой в 3D-сцене. С помощью этой техники получается реалистичное отражение и преломление физических объектов и людей внутри хромакея над графикой в реальном времени. Кроме того, эффекты ореола и блики линз накладываются на реальные элементы.
Reality передает поток в высоком разрешении на видеостены. С использованием трекинг-данных с камеры видеостену можно превратить в «портал» в виртуальную среду. С Reality виртуальную студию можно создать даже без хромакея.

С отслеживаемым потоком камеры в качестве входного изображения, Reality Engine отображает отражения и преломления реальной среды на виртуальных объектах. 3D-отражения и тени виртуальных объектов также накладываются на входящий поток с камеры. Ореол и блики, вызванные яркими виртуальными пикселями, также смешиваются с итоговой композицией.
В результате мы получаем максимально фотореалистичный компоузинг в режиме реального времени.

TDS

Светодиодные экраны как альтернатива хромакею
Для проецирования визуальных эффектов преимущественно используется хромакей. Однако современные технологии позволяют применять для создания виртуального фона светодиодные экраны.

С помощью нескольких камер слежения в реальном времени можно создавать впечатляющие сцены, которые естественным образом сочетаются с артистами и съемочной площадкой. Изображение на экране двигается за камерой, словно все снимается в живых декорациях.

Таким образом достигается эффект полного погружения в виртуальное изображение. Реализм картины зависит от качества проецируемого контента и дополнительного освещения на съемочной площадке. Преимуществом использования светодиодных экранов является то, что съемочная команда и зрители следят за видеконтентом и визуальными эффектами в режиме реального времени и без помощи дополнительных устройств.

TDS

TDS

TDS

Захват движения Mocap в прямом эфире
Технология motion capture – «захват движений» – оцифровывает движения актера и использует полученные данные для управления трехмерной моделью персонажа.
Правдоподобные люди, созданные в цифровом формате – растущая тенденция в мультимедиа. Их применение в маркетинговых и развлекательных целях растет по мере того, как сходятся титаны индустрии развлечений: медиа и игры.

Технология Mocap оживляет 3D-персонажа: он в режиме реального времени присутствует в игровых сценах, появляется на ток-шоу, выступает на лекциях/презентациях и т.д.
На человека надевают специальный костюм с датчиками, в котором он свободно двигается.

Данные с датчиков фиксируются камерами и поступают на компьютер, где сводятся в единую трехмерную модель, точно воспроизводящую движения актера. На основе этой модели в режиме реального времени создается анимация персонажа. Также этим методом воспроизводится мимика актера. Для этого на его лице располагают маркеры, позволяющие фиксировать основные мимические движения.
Пример: https://vimeo.com/367897427

TDS

TDS

Погружение оцифрованного актера в виртуальный мир
Актер, анимированный с помощью технологии захвата движения, может быть помещен не только в реальное пространство/декорации, но и в виртуальную среду. Современные технологии позволяют делать это без помощи каких-либо меток. Кроме того, сам актер с помощью специального шлема видит виртуальный мир вокруг себя, что значительно облегчает его игру. А съемочная группа в режиме реального времени видит пререндер сцены (анимированного персонажа в виртуальной среде) и максимально контролирует результат.

TDS

TDS

Телепортация
Фантазии о телепортации стали явью благодаря дополненной реальности.
Технология позволяет перемещаться из одной точки физического пространства в другую в голографической форме. В виртуальной студии одновременно могут находиться люди, которые физически располагаются в разных студиях, городах и странах.

При этом в кадре могут совмещаться как реальные люди, так и трехмерные проекции, и все это в прямом эфире. В условиях карантина и изоляции эта технология особенно актуальна, ведь герои могут оказываться в ТВ-студиях даже не выходя из дома.
Пример:

TDS

TDS

Понятие и критерии естественной эквализации музыкальных сигналов

Понятие и критерии естественной эквализации музыкальных сигналов

Дмитрий Таранов –  кандидат технических наук по специальностям «Акустика» и «Радиотехника» (ИРТСУ 2014), практикующий студийный звукоинженер, автор учебного пособия длявысших учебных заведений «Основы сведения музыки. Часть 1. Теория»

Андрей Жучков о том, что ему интересно

Андрей Жучков о том, что ему интересно

Имя и фамилия Андрея Жучкова значатся в титрах более чем 40 художественных и 2000 документальных фильмов, ему доверяют свои голоса лучшие российские актеры, а режиссеры точно знают, что он ювелирно сделает достоверный или самый необыкновенный эффект для фильма. 

Новая серия радиосистем FBW A

Новая серия радиосистем FBW A

Компания FBW представляет серию A – профессиональные радиосистемы начального ценового сегмента с большим выбором приемников и передатчиков в диапазоне частот 512 – 620 МГц.
Все модели предлагают высокий уровень сервисных возможностей. Это 100 частотных каналов, наличие функции AutoScan, три уровня мощности передатчика 2/10/30 МВт, три уровня порога срабатывания шумоподавителя squelch.  Доступны два вида ручных радиомикрофонов A100HT и A101HT, отличающихся чувствительностью динамического капсюля.

Universal Acoustics  в МХАТе имени Горького. Длительный тест акустических систем  российского производства

Universal Acoustics в МХАТе имени Горького. Длительный тест акустических систем российского производства

Московский Художественный академический театр имени М. Горького – театр с большой историей. В ноябре прошлого (2022) года он открыл двери после полномасштабной реконструкции. Разумеется, модернизация затронула и систему звукоусиления. В ходе переоснащения известный российский производитель акустических систем Universal Acoustics получил возможность протестировать свою продукцию в режиме реальной театральной работы. На тест во МХАТ имени Горького были предоставлены линейные массивы T8, звуковые колонны Column 452, точечные источники X12 и сабвуферы T18B.

«Торнадо» в день «Нептуна»

«Торнадо» в день «Нептуна»

2019 год стал для компании Guangzhou Yajiang Photoelectric Equipment CO.,Ltd очень богатым на новинки световых приборов. В их числе всепогодные светодиодные поворотные головы высокой мощности: серии Neptune, выпускаемые под брендом Silver Star, и Tornado – под брендом Arctik.

Panasonic в Еврейском музее

Panasonic в Еврейском музее

Еврейский музей и центр толерантности открылся в 2012 году в здании Бахметьевского гаража, построенного по проекту архитекторов Константина Мельникова и Владимира Шухова. Когда этот памятник конструктивизма передали музею, он представлял собой практически развалины. После реставрации и оснащения его новейшим оборудованием Еврейский музей по праву считается самым высокотехнологичным музеем России.
О его оснащении нам рассказал его IT-директор Игорь Авидзба.

Николай Лукьянов: звукорежиссура – дело всей жизни

Николай Лукьянов: звукорежиссура – дело всей жизни

Меня зовут Николай Лукьянов, я профессиональный звукорежиссер. Родился и вырос в Риге, там и начался мой путь в музыке. Джаз/госпел/фанк/асид джаз/хард рок/рок оперы/ симфонические оркестры – в каких сферах я только не работал.
В 2010 году перебрался в Россию, где и продолжил свою профессиональную карьеру.
Примерно 6 лет работал с группой Tesla Boy, далее – с Triangle Sun, Guru Groove Foundation,
Mana Island, Horse Power Band. Резидент джазового клуба Алексея Козлова.
А сейчас я работаю с группой «Ночные Снайперы».

Universal Acoustics  в МХАТе имени Горького. Длительный тест акустических систем  российского производства

Universal Acoustics в МХАТе имени Горького. Длительный тест акустических систем российского производства

Московский Художественный академический театр имени М. Горького – театр с большой историей. В ноябре прошлого (2022) года он открыл двери после полномасштабной реконструкции. Разумеется, модернизация затронула и систему звукоусиления. В ходе переоснащения известный российский производитель акустических систем Universal Acoustics получил возможность протестировать свою продукцию в режиме реальной театральной работы. На тест во МХАТ имени Горького были предоставлены линейные массивы T8, звуковые колонны Column 452, точечные источники X12 и сабвуферы T18B.

Звуковой дизайн. Ряд звуковых событий, созданных  в процессе коллективного творчества

Звуковой дизайн. Ряд звуковых событий, созданных в процессе коллективного творчества

Что вообще такое – звуковой дизайн, который и должен стать мощной частью выразительных средств современного театра? С этими вопросами мы обратились к звукоинженеру/саунд-дизайнеру Антону Фешину и театральному композитору, дирижеру, режиссеру и преподавателю ГИТИСа Артему Киму.

Понятие и критерии естественной эквализации музыкальных сигналов

Понятие и критерии естественной эквализации музыкальных сигналов

Дмитрий Таранов –  кандидат технических наук по специальностям «Акустика» и «Радиотехника» (ИРТСУ 2014), практикующий студийный звукоинженер, автор учебного пособия длявысших учебных заведений «Основы сведения музыки. Часть 1. Теория»

Андрей Жучков о том, что ему интересно

Андрей Жучков о том, что ему интересно

Имя и фамилия Андрея Жучкова значатся в титрах более чем 40 художественных и 2000 документальных фильмов, ему доверяют свои голоса лучшие российские актеры, а режиссеры точно знают, что он ювелирно сделает достоверный или самый необыкновенный эффект для фильма. 

Николай Лукьянов: звукорежиссура – дело всей жизни

Николай Лукьянов: звукорежиссура – дело всей жизни

Меня зовут Николай Лукьянов, я профессиональный звукорежиссер. Родился и вырос в Риге, там и начался мой путь в музыке. Джаз/госпел/фанк/асид джаз/хард рок/рок оперы/ симфонические оркестры – в каких сферах я только не работал.
В 2010 году перебрался в Россию, где и продолжил свою профессиональную карьеру.
Примерно 6 лет работал с группой Tesla Boy, далее – с Triangle Sun, Guru Groove Foundation,
Mana Island, Horse Power Band. Резидент джазового клуба Алексея Козлова.
А сейчас я работаю с группой «Ночные Снайперы».

Звуковой дизайн. Ряд звуковых событий, созданных  в процессе коллективного творчества

Звуковой дизайн. Ряд звуковых событий, созданных в процессе коллективного творчества

Что вообще такое – звуковой дизайн, который и должен стать мощной частью выразительных средств современного театра? С этими вопросами мы обратились к звукоинженеру/саунд-дизайнеру Антону Фешину и театральному композитору, дирижеру, режиссеру и преподавателю ГИТИСа Артему Киму.

Прокат как бизнес. Попробуем разобраться

Прокат как бизнес. Попробуем разобраться

Андрей Шилов: "Выступая на 12 зимней конференции прокатных компаний в Самаре, в своем докладе я поделился с аудиторией проблемой, которая меня сильно беспокоит последние 3-4 года. Мои эмпирические исследования рынка проката привели к неутешительным выводам о катастрофическом падении производительности труда в этой отрасли. И в своем докладе я обратил внимание владельцев компаний на эту проблему как на самую важную угрозу их бизнесу. Мои тезисы вызвали большое количество вопросов и длительную дискуссию на форумах в соцсетях."

Словарь

Футаж

(Footage) — видеофайл, содержащий анимированное или видеоизображение, используется при видеомонтаже. Футаж — это привнесённое в сюж...

Подробнее