Коли мільйони глядачів налаштувалися на показ Telemundo Олімпійських ігор 2024 року в Парижі, вони перенеслися до приголомшливого паризького панорамного виду з видом на Ейфелеву вежу. Але приголомшливий набір не був побудований у Франції – він був створений шляхом об’єднання фотореалістичних моделей з рендерингом у реальному часі зі студій мережі в Маямі.

«Ми можемо розмістити наших талантів у Парижі з красивим горизонтом, який може змінювати час доби, який можна точно налаштувати, і який дає відчуття перебування там, не відправляючи сім контейнерів обладнання та матеріалів», – сказав Воллі Родрігес, віце-президент з постпродакшну та візуальних ефектів Telemundo.

Використовуючи уроки, вивчені з попередніх Олімпійських ігор та трансляцій Чемпіонату світу, віртуальна студія Telemundo для Парижа 2024 року забезпечила вражаюче та гнучке середовище без логістичних проблем та витрат, пов’язаних зі спорудженням та відправкою фізичних декорацій. Від рухомих автомобілів та хитних дерев до віртуальних скульптур, створених справжніми художниками, кожна деталь була ретельно розроблена, щоб занурити глядачів в олімпійський досвід.

«Основним рушієм багатьох з цих речей є економіка, вірно? Ми відправляли багато людей на Олімпіаду. Відправка людей, декорацій, різного обладнання і так далі. І в деяких випадках це було красиво, а в інших – не так красиво, як хотілося б», – сказав Родрігес.

Віртуальна декорація транслювалася зі студії L в Telemundo Center в Маямі, використовуючи великий хромакей-цикл, який дозволяв талантам переміщатися по віртуальному світу.

Відтворивши місце поблизу площі Трокадеро в Парижі, де були розташовані багато міжнародних мовників, включаючи NBC, команда дизайнерів зосередилася на створенні фотореалістичного середовища з детальними деталями, щоб посилити відчуття присутності.

«Якщо ви увійдете і подивитеся на деталі, ви побачите, як машини рухаються на задньому плані, вітер колише дерева, люди гуляють по Ейфелевій вежі. Вони дійсно доклали всіх зусиль, щоб знайти кожну маленьку деталь [для включення у віртуальну декорацію]», – сказала Манаші Мукхерджі, віце-президент з технічного виробництва Telemundo.

Щоб досягти такого рівня реалізму, команди, які створювали декорації та графіку в реальному часі, провели ґрунтовне дослідження району Трокадеро.

«Вони занурилися в дуже дрібні деталі, знайшли фотографії району та того, що відбувається, яка вулиця, як виглядає карта вулиці, щоб, якщо б ми були на цій частині будівлі поруч з NBC, як би виглядав кут з нашого місця?» – пояснила Мукхерджі.

Декорація включала елементи, натхненні паризькою архітектурою, і обрамлена кованою роботою, натхненною Ейфелевою вежею. Команда навіть залучила професійного художника для скульптурної обробки 3D-моделей, щоб додати унікальні елементи навколо простору мовлення.

«Якщо ви увійдете в студію і збільшите її, ви можете побачити деталі статуї», – сказала Мукхерджі, зазначивши також, що в моделі враховувалися такі дрібні деталі, як вивітрювання та відблиски.

В основі віртуальної студії Telemundo лежав Unreal Engine 5 від Epic Games, інструмент створення в реальному часі, який широко використовується в ігровій індустрії та все частіше використовується для мовних застосувань. Набір для Олімпійських ігор використовував чотири спеціалізовані двигуни Unreal, а всього в Telemundo Center було одинадцять двигунів для різних застосувань розширеної реальності та віртуальної реальності.

Відстеження камери здійснювалося системою Stype RedSpy з ключовими моментами від Blackmagic Ultimatte.

«Технологія відстеження, яку ми використовуємо, дозволяє нам мати багатокамерний набір у студії. Тому це дійсно відчувається дуже реалістично, тому що фон рухається разом з камерою», – пояснила Мукхерджі.

Використання одного Unreal Engine на камеру дозволило здійснити композицію віртуальних елементів з живими потоками з камер у реальному часі. Це вирівнювання дало талантам можливість бачити реальний перегляд їхнього оточення на моніторах відтворення в студії, щоб краще взаємодіяти з простором.

Щоб досягти більш кінематографічного вигляду, Telemundo впровадила розрахунки глибини різкості у свою віртуальну декорацію. «На самому початку Олімпійських ігор в Токіо ми попросили Chyron впровадити розрахунки глибини різкості в налаштування. Тому, коли ми в ефірі, у нас немає такого плоского вигляду, який виникає в багатьох віртуальних декораціях, тому що все в фокусі», – пояснив Родрігес.

Ця функція додала віртуальному середовищу шар реалізму, імітуючи оптичні характеристики фізичних камер і об’єктивів.

«Це робить зображення більш висококласними. Воно виглядає більш кінематографічним, тому що так поводяться кінокамери», – додав Родрігес.

Оптимізація продуктивності також була ключовим моментом для команди, з особливою увагою до створення та управління активами. Зберігаючи весь процес під контролем, від проектування до реалізації, команда переконалася, що віртуальні елементи оптимізовані для рендерингу в реальному часі всередині Unreal.

«Управління продуктивністю для Unreal є досить великим. І це дуже важко досягти, коли ви отримуєте моделі від сторонньої компанії. Тому ми могли б побудувати покращення продуктивності безпосередньо або вимірювання продуктивності та своєрідне планування продуктивності з самого етапу моделювання», – пояснив Родрігес.

«3D-люди – це як симулятори, тоді як люди, які працюють з композицією – це семплери. 3D-аниматори хочуть змоделювати останній маленький гвинт, тоді як композитори просто беруть красиву текстуру гвинта і накладають її на нього. Тому на задньому плані відбувається дуже цікавий мікс управління продуктивністю, який, на мій погляд, можливий лише тоді, коли команда, яка створює активи, тісно співпрацює з командою, яка їх фактично відтворюватиме», – сказав Родрігес.

Telemundo використовувала Chyron Prime VSAR з Unreal Engine, щоб вивести набір в ефір, що дозволило безперебійно інтегрувати мовну графіку в віртуальне середовище.

«Команда тут довго працювала над створенням панелей інструментів, які можна використовувати для введення всіх даних і запуску графіки в ефірі … це захищає продюсерів від усієї технологічної частини», – пояснив Родрігес.

Цей підхід спростив робочий процес продюсерської групи, дозволивши їм зосередитися на створенні контенту, а не на технічних тонкощах. Система надала попередньо скомпоновані зображення для кожної камери, які можна було переглядати операторам та талантам, що покращило взаємодію в реальному часі з віртуальною декорацією протягом усього мовлення.

На прийняття технології віртуальної студії для Олімпійських ігор вплинуло кілька факторів, включаючи економії та стійкість. Telemundo суттєво зменшила логістичні проблеми, пов’язані з масштабним мовленням подій, усунувши необхідність будівництва, доставки та зберігання фізичних декорацій.

Віртуальне середовище також забезпечило безпрецедентну гнучкість.

Мукхерджі пояснила: «У нас були квіти на декораціях, які виглядали дивно в камері, коли перспектива не змінювалася. Наша команда графіків просто намалювала їх у віртуальну декорацію за лічені години». Ця можливість внесення змін у реальному часі дозволила продюсерській групі швидко реагувати на зміни потреб протягом Олімпійського періоду, не обтяжуючи себе обмеженнями фізичного будівництва.

Успіх реалізації віртуальної студії став можливим завдяки тісній співпраці різних внутрішніх команд.

«Уся наша команда працює вдома. Дизайнери, реалізатори та оператори, які відтворюють це під час шоу», – зазначила Мукхерджі. Цей інтегрований підхід, який поширювався і на спортивну команду, гарантував, що віртуальне середовище відповідає специфічним потребам мовлення Олімпійських ігор.

Дивлячись у майбутнє, Telemundo вже досліджує нові сфери застосування цієї технології.

«Наш менеджмент справді хоче, щоб ми пробували нові ідеї та тестували різні речі», – сказала Мукхерджі. «Це справді крута синергія, тому що ми можемо тестувати речі, бачити, що працює, а що ні, і потім радити нашим партнерам в MSNBC, CNBC, NBC».

Цей прогресивний підхід свідчить про те, що технологія віртуальної студії стане все більш важливою в спортивному та новинному мовленні, а Telemundo прагне бути на чолі цього руху.