Rozšířená realita na záchranu. Zrušení NAB 2022-2023 kvůli pandemii COVID-19 vyvolalo vlny v celém vysílacím průmyslu. NAB Show, která se každoročně koná v Las Vegas, je největší vysílací veletrh s více než 90 000 účastníky z více než 160 zemí. Většina z 1600 vystavovatelů uvádí na trh nové produkty a technologie a pro mnoho velkých společností je zavedeno až šestiměsíční plánování. Během velmi krátké doby musel tým Panasonic Pro Video přijít s alternativami, jak svou zprávu šířit při práci na dálku z domova.
Audio + Video + IT. Naši redaktoři jsou odborníky na integraci zvuku, videa a IT. Získejte denní přehledy, zprávy a profesionální síťové připojení. Přihlaste se k odběru Pro AV ještě dnes
Ve dnech před zrušením NAB Show začal tým Panasonic zkoumat možnosti, jak provést náhradní akci, včetně myšlenky vybudování fyzického stánku, kde by zákazníci mohli navštěvovat online. Tým Panasonic Pro Video byl také v diskusi s Paulem Lacombem, generálním ředitelem společnosti DisruptAR se sídlem v Nové Anglii, který se specializuje na vytváření virtuálních produkcí. Poté, co zahájil svou kariéru ve společnosti General Motors po vysoké škole, pracuje Lacombe ve výrobním průmyslu již 30 let, počínaje koncem 80. let v Silicon Graphics, než se sám pustí do virtuální produkce. DisruptAR se zaměřuje na snížení výrobních nákladů na AR a VR na širším trhu.
- Esports Training Factory streamovací infrastruktura
- Citizen Cope debutuje v koncertním prostoru bezpečném pro Covidy
- Vzdálené učení: Jak zajistit, aby fungoval vzdálený orchestr
- Nejlepší kamery PTZ pro živé vysílání
16. března se New Jersey, kde sídlí americké sídlo společnosti Panasonic, oficiálně uzavře; na 18. března Lacombe naplánoval první demo pro tým Panasonic. NAB Show 2022-2023 byla zrušena 20. března. “
Museli jsme se velmi rychle rozhodnout mezi těmito dvěma možnostmi, “prozrazuje technický manažer společnosti Panasonic Harry Patel. "První možnost vyžadovala fyzické vybudování stánku, uvedení produktu při dodržení sociálních distančních požadavků (méně než 10 lidí najednou) a přivedení filmového štábu." Nebylo to praktické a chtěli jsme udělat něco s vyšší kvalitou, i když jsme nemohli opustit své domovy. Nakonec se tedy o této myšlence virtuální události diskutovalo dále a byla schválena do konce března. “
Rozšířená realita a vzdálená výroba
Vzdálená výroba není nový koncept. Režisér Francis Ford Coppola skvěle režíroval a upravil mnoho scén z jeho filmu Jeden ze srdce z roku 1982 z přívěsu poblíž scény. Ale vytváření produkce na dálku z domova během globální pandemie je jiný příběh. Bylo to možné pouze pomocí nejmodernějších kamerových technologií, herních engine VR a cloudových aplikací.
Prvním cílem společnosti Panasonic bylo vytvořit jasnou zprávu s verbální a písemnou komunikací přeloženou do vizuálního video formátu. V NAB by prodejci obvykle komunikovali se zákazníky na výstavišti a diskutovali o řešení problémů každé osoby. Manažer marketingové skupiny Jim Wickizer a agentura P.R., Racepoint Global, dokázali přijít s konzistentním poselstvím a spolupracovali s jednotlivými produktovými manažery na představení správných mluvících bodů.
Patel a Wickizer také začali vzdáleně spolupracovat s Lacombe z jeho domácího studia na vytváření video rozhovorů mezi produktovými manažery a hostitelkou studia Zoe Laiz, kteří měli diskutovat o nových produktech a technologiích. "Všichni jsme měli náročná produkční prostředí, ale udělat to na dálku s tímto plánem, to byl rozhodně skok víry," vysvětluje Lacombe. "V mých útrobách jsem věděl, že to může fungovat, ale nikdy jsem to neudělal."
Pro dálkové nahrávání obdrželi všichni produktoví manažeři notebook, mikrofon USB Blue Yeti a profesionální PTZ kameru Panasonic AW-HE42 Full-HD. HE42 byl připojen přes Ethernet a PTZ Virtual USB Driver a video bylo přeneseno do notebooku pomocí OBS pro záznam a TeamViewer pro dálkové ovládání.
Týmy rozšířené reality a MS
Pro komunikaci, sdílení souborů, prohlížení ukázek a sledování vzdálených produkčních výstřelů společnost Panasonic použila platformu pro komunikaci a spolupráci Microsoft Teams. Přes noc platformy jako Teams, Zoom, Ring Central a mnoho dalších umožnily lidem a podnikům bezpečně komunikovat s vnějším světem z jejich domovů.
Chcete-li zobrazit, co Lacombe zachytil na scéně během výroby, použil Patel sdílení Teams Screen a vytvořil čtyřnásobné rozdělení pomocí výstupu přepínače AV-UHS500 do převaděče z SDI na USB. Zdroj USB byl ve Windows prezentován jako zdroj fotoaparátu, který sdíleli prostřednictvím týmů.
Během dohledu na záznam Senior Vice President, Professional Imaging & Visual Systems, úvodní poznámky Johna Baisleye, prostřednictvím týmů, Patel a Wickizer mohli živě zobrazit obývací pokoj Baisleyho a poskytnout směr, ať už jde o chybu čtení řádku, změnu pozadí nebo technickou problém se zvukem. Prostřednictvím týmů byl Patel také schopen poskytnout směr obrazovky pozorováním zelené obrazovky i zobrazení virtuální sady. "Kdyby Zoey stála přímo za dveřmi a vstoupila, mohli bychom skutečně zjistit, zda je výstřel dobrý," vysvětluje Patel. "Řekl bych Paulovi prostřednictvím týmů:" Mohlo by to fungovat lépe, kdyby se pohybovala jen trochu správně. "Pokud jde o vzdálenou spolupráci, nemyslím si, že by to bylo možné bez použití týmů."
"Dělat to na dálku bylo skvělé," dodává Wickizer. "Měli jsme osobu v Bostonu, Harry a já jsme byli v našich domovech v New Jersey a měli jsme další osobu na západním pobřeží." Moje dcera jednou sestoupila do našeho sklepa a zeptala se, co dělám. „Děláme vzdálenou produkci,“ řekl jsem jí. Opravdu tomu nemohla uvěřit. “
Free-D a Unreal Engine
Chcete-li začlenit realistické studiové sady VR do živé produkce, je nezbytné pořizovat přesné údaje o poloze kamery. Před představením své první ukázky pro společnost Panasonic vyvinul DisruptAR ovladač Free-D, který by umožňoval připojení kamery AW-UE150 4K Pro PTZ přímo do Unreal Engine, což mu poskytlo možnost výstupu informací o Pan / Tilt / Zoom / Iris přes IP (UDP) přímo z kamery do sledovacího systému Unreal live bez nutnosti dalších senzorů nebo enkodérů.
„Free-D pochází z BBC počátkem 90. let jako sledovací protokol pro jeden z jejich kamerových sledovacích systémů,“ vysvětluje Lacombe. "Definuje šest stupňů volnosti - pan, tilt, roll, X, Y, Z, stejně jako zorné pole, zoom a zaostření." Tyto hodnoty jsou odesílány dolů do virtuálního vykreslovacího modulu a připojeny k virtuální kameře, takže vaše pozadí odpovídá odpovídajícím způsobem v reálném čase rychlostí 60 snímků za sekundu. “
Podle Lacombeho byl Unreal Engine použit plošně na mnoha produkcích - od Lvího krále po Mandaloriana. "Je to základní technologie, kterou právě teď používá většina Hollywoodu," říká Lacombe. „Většinou to používají jako proxy, ale cílem je„ konečný pixel “, což je to, co vidíte na obrazovce v reálném čase, to, co je na obrazovce.“
„Unreal Engine je herní engine, který byl použit na jiných trzích, včetně architektury, vizualizace CAD a v tomto případě vysílání a filmu,“ říká Lacombe. "Používáme jej k dosažení nejvyšší úrovně fotorealismu, přičemž využíváme výhod tradičních nástrojů DCC, jako jsou Maya, 3D Studio Max, Blender, používáme grafické karty NVIDIA rychlostí 60 snímků za sekundu, což divákům dává věrnost charakteristik objektivu, jako je kvetení, světlice a rozostření. Kvalita, kterou potřebujete k získání fotorealismu a vykreslování rychlostí 60 snímků za sekundu, je v podstatě to, co dělá Unreal Engine. “
Vytváření virtuálního světa… v garáži
Lacombeho studio je ve své přestavěné garáži, která měří pouze 20 x 24 a jeho posádku tvořil pouze jeden asistent. Pro zelenou obrazovku použil pozadí Pro Cyc Portable. Z důvodu prostorových omezení mohl Laiz projít jen pár kroků, takže byly omezeny na fotoaparáty, což z AW-UE150 dělá perfektní nástroj pro tuto práci. Při osvětlení své zelené obrazovky použil Lacombe 14 ”LED panely. "Myšlenka je, že opravdu chcete mít jeden odstín zelené a zbavit se všech těch skvrn, aby váš klíčovač mohl tyto stíny udržet," vysvětluje Lacombe. "Vyberete jednu zelenou, kterou chcete klíčit, a tmavší zelené jsou stíny překryté vaší virtuální sadou."
I když pracoval v malém prostoru své garáže, musel svůj talent osvětlit motivovaným světlem velkého studia. K osvětlení Laiz použil Lacombe dva LED panely pro svůj klíč i výplň. Také použil několik reflektorů shora, aby simuloval načervenalé světlo vycházející z oken. "V zásadě se snažíme přizpůsobit ten směr a teplotu barev, aniž bychom ovlivnili zelenou obrazovku," odhaluje Lacombe. "To je výzva, protože se snažíte osvětlit talent odděleně od zelené obrazovky." Dveře stodoly na těch LED nám dávaly větší prostor, ale bojovali jsme, abychom se dostali pryč od zelené a dostali minimální odraz od zelené na její oblečení a kůži. “
Při natáčení používal Lacombe dvě kamery UE150: kamera 1 byla na levé straně a kamera 2 na pravé straně. Když se Zoe otočila tváří v tvář produktovému manažerovi pozorovanému na vertikálním monitoru, přepnul na kameru dva v Laizově úrovni očí, aby získal simulovaný produktový manažer. Sladit oční linky je výzva, ale Lacombe říká, že by ji mohl trochu podvádět, kdyby věděl, kde je jeho nastavená domácí pozice. "Pokud jste měli dvě kamery, jedna měla 90 stupňů vůči druhé ve vzdálenosti 8 stop a druhá 4 stopy, můžete měřit pomocí metru a umístit je do virtuálního světa ve stejné poloze." Budou se navzájem dodržovat prostřednictvím fyzikálních zákonů, takže vypadají, jako by byli v této přesné pozici. A pak můžete v rámci těchto pokynů trochu podvádět. “
Produkční design jediným kliknutím
Pro návrh virtuální sady použil Lacombe upravený design, který minulý rok pracoval s jiným klientem. Návrh byl proveden v Mayě a exportován do Unrealu. Vzhledem k tomu, že se virtuální sada odehrává v noci, měli zpočátku tmavší pohled, ale pak se rozhodli, že bude dotykový jasnější. Přidal logo Panasonic a odnesl prvky, které pro sadu Panasonic nebyly podstatné. Přidal také monitor vycházející z podlahy, který Laiz vyšel zpoza ní.
Při vytváření vlastní virtuální sady je podle Lacombe k dispozici více 3D aktiv, protože online architektonická vizualizace se opravdu rozběhla. Můžete přejít do 3D knihovny, najít 3D podklady nebo modely a sestavit je podle toho, jaké jsou vaše požadavky na přizpůsobení. "Je to opravdu tam a zpět s klientem," vysvětluje Lacombe. "Přidáte své marketingové komponenty, značky, všechny barvy a materiály." Jakmile máte aktivum tam, můžete sundat stěny pomocí tlačítka, klikat nebo přesouvat věci, upravovat monitory vše v reálném čase. Ve „fyzickém světě“ by to vyžadovalo značné množství času a peněz. Jakmile máte věc postavenou, je snadné ji upravit a vrátit se k ní. “
Udržování bezpečné vzdálenosti
Virtuální produkce se v průběhu desetiletí vyvíjela díky zkušenostem a zdokonalování. Ačkoli jsou role fyzické produkce a virtuální produkce v zásadě stejné, největší rozdíl je v tom, že každý pracuje ve stejném fyzickém prostoru. Jakmile se zruší vyhláška „zůstat doma“, stále se určuje, zda se skutečná vzdálená výroba stane normou.
"Existuje důvod, proč se někdo dívá na klíč, někdo se dívá na scénář, někdo se dívá na úhly kamery a skříň," říká Lacombe. Všechny tyto role je ještě třeba splnit a my se jen snažíme vymyslet nejlepší způsob, jak to udělat na dálku. Zatím to vyšlo neuvěřitelně dobře a všichni jsme překvapeni, jak se to spojilo tak rychle a přirozeným způsobem. I když jsme pro tuto výrobu museli nosit více klobouků, než bychom si přáli, dalším logickým krokem je jejich další distribuce, aby se zapojili další do zdokonalování a zdokonalování procesu. Ale poprvé z brány jsem s výsledky velmi spokojen a dychtím ho posunout k dalšímu kroku. “
Chcete-li sledovat virtuální událost společnosti Panasonic, Budoucnost video produkce , proklikejte se sem.
Další informace o DisruptAR najdete na www.disruptar.com.