Als Millionen von Zuschauern die Berichterstattung von Telemundo über die Olympischen Spiele 2024 in Paris einschalteten, wurden sie in eine atemberaubende Pariser Aussicht mit Blick auf den Eiffelturm versetzt. Doch das atemberaubende Set wurde nicht in Frankreich gebaut – es wurde durch die Kombination von fotorealistischen Modellen mit Echtzeit-Rendering aus den Studios des Senders in Miami geschaffen.
„Wir können unsere Talente in Paris mit einer wunderschönen Skyline platzieren, die sich an die Tageszeit anpassen lässt, die fein abgestimmt werden kann und dieses Gefühl vermittelt, dort zu sein, ohne sieben Container mit Ausrüstung und Materialien zu schicken“, sagte Wally Rodriguez, VP, Postproduktion und visuelle Effekte, Telemundo.
Aufbauend auf den Erfahrungen aus früheren Olympischen Spielen und Weltmeisterschaften lieferte das virtuelle Studio von Telemundo für Paris 2024 eine beeindruckende und flexible Umgebung, ohne die logistischen Herausforderungen und Kosten, die mit dem Bau und dem Transport von physischen Sets verbunden sind. Von fahrenden Autos und sich wiegenden Bäumen bis hin zu virtuellen Skulpturen, die von echten Künstlern geschaffen wurden, wurde jedes Detail sorgfältig gestaltet, um die Zuschauer in das olympische Erlebnis einzutauchen.
„Der Haupttreiber für viele dieser Dinge ist die Wirtschaftlichkeit, richtig? Wir haben viele Leute geschickt, um die Olympischen Spiele zu begleiten. Leute, Sets, alle möglichen Geräte usw. usw. zu schicken. Und in einigen Fällen war es schön, und in anderen war es nicht so schön, wie wir es uns gewünscht hätten“, sagte Rodriguez.
Das virtuelle Set wurde aus Studio L im Telemundo Center in Miami übertragen, wobei ein großer Chromakey-Cyc verwendet wurde, der es den Talenten ermöglichte, sich in der virtuellen Welt zu bewegen.
Das Designteam konzentrierte sich darauf, eine fotorealistische Umgebung mit filigranen Details zu schaffen, um das Gefühl der Präsenz zu verstärken, und schuf eine Nachbildung eines Ortes in der Nähe des Trocadéro-Platzes in Paris, wo viele internationale Sender, darunter NBC, stationiert waren.
„Wenn Sie hereinkommen und sich die Details ansehen, sehen Sie im Hintergrund Autos fahren, es gibt Wind mit den Bäumen, Leute im Eiffelturm, die herumlaufen. Sie haben sich wirklich Mühe gegeben, nach jedem einzelnen Detail zu suchen [um es in das virtuelle Set aufzunehmen]“, sagte Manashi Mukherjee, VP, technische Produktion, Telemundo.
Um diesen Grad an Realismus zu erreichen, führten die Teams für Set-Herstellung und Echtzeit-Grafiken umfangreiche Recherchen im Trocadéro-Gebiet durch.
„Sie sind in die kleinsten Details gegangen, haben Fotos der Gegend und was dort passiert, gefunden, wie die Straße aussieht, wie die Karte der Straße dort aussieht, also wenn wir auf diesem Teil des Gebäudes neben NBC wären, wie würde der Winkel von unserem Platz aus aussehen?“, erklärte Mukherjee.
Das Set enthielt Elemente, die von der Pariser Architektur inspiriert sind und von Schmiedearbeiten eingerahmt werden, die vom Eiffelturm inspiriert sind. Das Team holte sogar einen professionellen Künstler hinzu, um 3D-Modelle zu erstellen, um einzigartige Elemente rund um den Sendebereich hinzuzufügen.
„Wenn Sie in das Studio gehen und hineinzoomen, können Sie die Details der Statue sehen“, sagte Mukherjee und bemerkte auch, dass kleine Details wie Verwitterung und Reflexionen im Modell berücksichtigt wurden.
Im Kern des virtuellen Studios von Telemundo stand Unreal Engine 5 von Epic Games, ein Echtzeit-Erstellungstool, das in der Spieleindustrie weit verbreitet ist und zunehmend für Broadcast-Anwendungen eingesetzt wird. Das Olympia-Set nutzte vier dedizierte Unreal Engines, wobei elf Engines im gesamten Telemundo Center für verschiedene Augmented-Reality- und Virtual-Anwendungen eingesetzt wurden.
Die Kameratracking wurde von einem Stype RedSpy-System mit Keying von Blackmagic Ultimatte übernommen.
„Die Tracking-Technologie, die wir verwenden, ermöglicht es uns, ein Mehrkameraset im Studio zu haben. Es fühlt sich also wirklich realistisch an, weil sich der Hintergrund mit der Kamera bewegt“, erklärte Mukherjee.
Die Verwendung einer Unreal Engine pro Kamera ermöglichte die Echtzeit-Komposition der virtuellen Elemente mit den Live-Kamera-Feeds. Diese Ausrichtung ermöglichte es den Talenten, auf Wiedergabemonitoren im Studio eine Echtzeitansicht ihrer Umgebung zu sehen, um besser mit dem Raum zu interagieren.
Um einen filmischeren Look zu erreichen, implementierte Telemundo Tiefenunschärfeberechnungen in sein virtuelles Set. „Schon früh um die Olympischen Spiele in Tokio herum haben wir Chyron die Implementierung von Tiefenunschärfeberechnungen in das Setup veranlasst. Wenn wir also auf Sendung sind, haben wir nicht diesen flachen Look, den man bei vielen virtuellen Sets bekommt, weil alles scharf ist“, erklärte Rodriguez.
Diese Funktion fügte der virtuellen Umgebung eine Ebene von Realismus hinzu und ahmte die optischen Eigenschaften von physischen Kameras und Objektiven nach.
„Dadurch sehen die Bilder hochwertiger aus. Es sieht filmischer aus, weil sich Kinokameras so verhalten“, fügte Rodriguez hinzu.
Die Leistungsoptimierung war ebenfalls ein wichtiger Schwerpunkt für das Team, wobei besonderes Augenmerk auf die Erstellung und Verwaltung von Assets gelegt wurde. Indem das Team den gesamten Prozess von der Planung bis zur Implementierung intern abwickelte, stellte es sicher, dass die virtuellen Elemente für das Echtzeit-Rendering in Unreal optimiert wurden.
„Das Leistungsmanagement für Unreal ist ziemlich umfangreich. Und das ist sehr schwer zu erreichen, wenn Sie Ihre Modelle von Drittanbietern beziehen. So konnten wir direkt Leistungssteigerungen oder Leistungsmaße erstellen und sozusagen die Leistung bereits in der Modellierungsphase planen“, erklärte Rodriguez.
„3D-Leute sind wie Simulatoren, während Kompositing-Leute Sampler sind. 3D-Animatoren wollen die letzte kleine Schraube modellieren, während Kompositoren einfach eine schöne Textur einer Schraube nehmen und sie darauf kleben. Es gibt also eine sehr interessante Mischung aus Leistungsmanagement, die im Hintergrund stattfindet und meiner Meinung nach nur möglich ist, wenn das Team, das die Assets erstellt, sehr eng mit dem Team zusammenarbeitet, das sie tatsächlich wiedergibt“, sagte Rodriguez.
Telemundo nutzte Chyron Prime VSAR mit der Unreal Engine, um das Set auf Sendung zu bringen, was die nahtlose Integration von Broadcast-Grafiken in die virtuelle Umgebung ermöglichte.
„Das Team hier hat lange Zeit an der Erstellung von Dashboards gearbeitet, mit denen Sie alle Daten eingeben und Grafiken auf Sendung auslösen können ... es schützt die Produzenten vor dem gesamten technologischen Teil“, erklärte Rodriguez.
Dieser Ansatz vereinfachte den Workflow des Produktionsteams, sodass es sich auf die Content-Erstellung konzentrieren konnte, anstatt auf technische Feinheiten. Das System lieferte vor-komponierte Bilder für jede Kamera, die von den Bedienern und Talenten sichtbar waren, was die Echtzeit-Interaktion mit dem virtuellen Set während der gesamten Berichterstattung verbesserte.
Mehrere Faktoren trieben die Einführung der virtuellen Studiotechnologie für die Olympischen Spiele voran, darunter Kosteneinsparungen und Nachhaltigkeit. Telemundo reduzierte die logistischen Herausforderungen, die mit der Berichterstattung über Großveranstaltungen verbunden sind, deutlich, indem es die Notwendigkeit des Baus, Versands und der Lagerung von physischen Sets eliminierte.
Die virtuelle Umgebung bot auch beispiellose Flexibilität.
Mukherjee erklärte: „Wir hatten Blumen auf dem Set, die auf Kamera seltsam aussahen, wenn sich die Perspektive nicht änderte. Unser Grafikteam hat sie einfach innerhalb weniger Stunden in das virtuelle Set gezeichnet.“ Diese Möglichkeit, Echtzeit-Anpassungen vorzunehmen, ermöglichte es dem Produktionsteam, während der gesamten Olympiaperiode schnell auf sich ändernde Bedürfnisse zu reagieren, ohne von den Einschränkungen des physischen Baus belastet zu werden.
Der Erfolg der Implementierung des virtuellen Studios resultierte aus der engen Zusammenarbeit zwischen verschiedenen internen Teams.
„Unser gesamtes Team ist intern. Die Designer, die Implementierer und die Bediener, die dieses Zeug während der Show wiedergeben“, bemerkte Mukherjee. Dieser integrierte Ansatz, der sich auch auf das Sportteam erstreckte, stellte sicher, dass die virtuelle Umgebung die spezifischen Bedürfnisse der Olympia-Berichterstattung erfüllte.
Mit Blick auf die Zukunft erforscht Telemundo bereits neue Anwendungen für diese Technologie.
„Unsere Führungskräfte sind wirklich daran interessiert, uns neue Ideen ausprobieren und Dinge testen zu lassen“, sagte Mukherjee. „Es ist eine wirklich coole Synergie, denn wir können Dinge testen, sehen, was funktioniert, was nicht funktioniert, und dann unsere Partner bei MSNBC, CNBC, NBC beraten.“
Dieser zukunftsorientierte Ansatz deutet darauf hin, dass die virtuelle Studiotechnologie in der Sport- und Nachrichtenberichterstattung immer wichtiger werden wird, wobei Telemundo an vorderster Front stehen möchte.