Sejem razširjene resničnosti: kako je Panasonic to storil na daljavo z AR

Kazalo:

Anonim

Povečana resničnost na pomoč. Preklic NAB 2022-2023 zaradi pandemije COVID-19 je povzročil udarne valove v celotni radiodifuzni industriji. Vsako leto v Las Vegasu poteka razstava NAB Show, ki je največji sejem z več kot 90.000 udeleženci iz več kot 160 držav. Večina od 1.600 razstavljavcev predstavlja nove izdelke in tehnologije, za številna velika podjetja pa je uvedeno do šest mesecev načrtovanja. V zelo kratkem časovnem obdobju je morala ekipa Panasonic Pro Video najti druge možnosti, kako svoje sporočilo razkriti med oddaljenim delom od doma.

Avdio + Video + IT. Naši uredniki so strokovnjaki za povezovanje zvoka, videa in informatike. Pridobite vsakodnevne vpoglede, novice in profesionalno mreženje. Naročite se na Pro AV danes

V dneh pred odpovedjo razstave NAB je ekipa Panasonica začela preučevati možnosti za nadomestni dogodek, vključno z idejo o gradnji fizične kabine, kjer bi lahko stranke obiskale splet. Skupina Panasonic Pro Video se je pogovarjala tudi s Paulom Lacombejem, izvršnim direktorjem DisruptAR s sedežem v Novi Angliji, ki je specializiran za ustvarjanje virtualnih produkcij. Po začetku kariere v General Motorsu je Lacombe že 30 let delal v produkcijski industriji, konec poznih osemdesetih let pri Silicon Graphics, preden se je sam podal v virtualne produkcije. DisruptAR se osredotoča na znižanje proizvodnih stroškov AR in VR za širše tržno tržišče.

  • Pretočna infrastruktura Esports Training Factory
  • Citizen Cope je predstavil koncertni prostor, ki je varen v Covidu
  • Daljinsko učenje: Kako narediti oddaljeni orkester
  • Najboljše PTZ kamere za pretakanje v živo

16. marca je New Jersey, kjer je sedež Panasonicovega ameriškega sedeža, uradno zaklenjen; 18. marca je Lacombe načrtoval prvi demo za ekipo Panasonic. NAB Show 2022-2023 je bil odpovedan 20. marca. "

Zelo hitro smo se morali odločiti med obema možnostma, «razkrije Panasonicov inženirski vodja Harry Patel. »Prva možnost je zahtevala fizično gradnjo kabine, pripeljati izdelek, hkrati pa upoštevati zahteve glede družbene oddaljenosti (manj kot 10 ljudi hkrati) in pripeljati filmsko ekipo. To ni bilo praktično in želeli smo narediti nekaj bolj kakovostnega, čeprav nismo mogli zapustiti svojih domov. Na koncu smo o tej ideji virtualnega dogodka nadalje razpravljali in jo odobrili do konca marca. "

Paul Lacombe iz DisruptAR-a naredi virtualni demo od svojega doma po protokolu Free-D.

Povečana resničnost in oddaljena proizvodnja

Daljinska proizvodnja ni nov koncept. Režiser Francis Ford Coppola je iz napovednika blizu snemanja slavno režiral in montiral številne prizore iz svojega filma iz leta 1982, One From the Heart. Toda ustvarjanje produkcije na daljavo od doma med svetovno pandemijo je druga zgodba. To je bilo mogoče le z uporabo najsodobnejše tehnologije kamer, igralnih mehanizmov VR in aplikacij v oblaku.

Za Panasonic je bil prvi cilj ustvariti jasno sporočilo z ustno in pisno komunikacijo, prevedeno v bolj vizualno video obliko. V podjetju NAB prodajalci običajno komunicirajo s strankami na razstavah in razpravljajo o rešitvah težav vsake osebe. Vodja marketinške skupine Jim Wickizer in agencija P.R., Racepoint Global, sta lahko pripravila dosledno sporočilo in sodelovala s posameznimi produktnimi vodji, da sta predstavila prave pogovorne točke.

Patel in Wickizer sta z Lacombejem začela sodelovati tudi na daljavo iz njegovega domačega studia, da bi ustvarila video intervjuje med vodji izdelkov in voditeljico studia Zoe Laiz, ki naj bi razpravljala o novih izdelkih in tehnologiji. "Vsi smo imeli zahtevna proizvodna okolja, toda če smo to storili na daljavo s tem urnikom, je bil to vsekakor preskok," pojasnjuje Lacombe. "V črevesju sem vedel, da bi to lahko delovalo, vendar to še nikoli ni bilo zaskrbljujoče."

Lacombe je svojo garažo velikosti 20 x 24 palcev preuredil v studio.

Za snemanje na daljavo so vsi upravitelji izdelkov prejeli prenosni računalnik, USB mikrofon Blue Yeti in profesionalno PTZ kamero Panasonic AW-HE42 Full-HD. HE42 je bil povezan prek Etherneta in navideznega gonilnika PTZ, video pa je bil prenesen v prenosnik z uporabo OBS za snemanje in TeamViewer za daljinsko upravljanje.

Razširjene resničnosti in ekipe MS

Za komunikacijo, izmenjavo datotek, ogled predstavitev in spremljanje oddaljenih produkcijskih snemanj je Panasonic uporabil Microsoft Teams, platformo za komunikacijo in sodelovanje. Platforme, kot so Teams, Zoom, Ring Central in številne druge, so čez noč ljudem in podjetjem omogočile varno komunikacijo z zunanjim svetom od svojih domov.

Da bi si ogledal, kaj je Lacombe posnel na snemanju med produkcijo, je Patel uporabil skupinsko skupno rabo zaslona Teams Screen, pri čemer je uporabil izhod za preklop AV-UHS500 na pretvornik iz SDI v USB. Vir USB je bil v sistemu Windows predstavljen kot vir kamere, ki so ga delili prek skupin Teams.

Med nadzorom nad snemanjem uvodnega govora starejšega podpredsednika, Johna Baisleyja, Professional Imaging & Visual Systems, sta si Patel in Wickizer prek Teams lahko v živo ogledala Baisleyjevo dnevno sobo in podala smer, ali gre za napako pri branju črte, spremembo ozadja ali tehnično težava z zvokom. Preko Teams je Patel lahko zagotovil tudi usmerjanje zaslona z opazovanjem zelenega zaslona in pogledov virtualnih nastavitev. "Če bi Zoey stala tik za vrati in vstopila, bi res lahko videli, ali je bil strel dober," pojasnjuje Patel. "Paulu bi prek ekipe rekel:" Morda bi bolje delovalo, če bi se premaknila le malo. "Kar zadeva sodelovanje na daljavo, mislim, da brez uporabe skupin ne bi bilo mogoče."

Medtem ko je višji podpredsednik za profesionalne slikovne in vizualne sisteme John Baisley zapisoval svojo uvodno besedo, si je ekipa lahko v živo ogledala Baisleyjevo dnevno sobo in prek Microsoftovih ekip zagotovila smernice.

"To je bilo super narediti na daljavo," dodaja Wickizer. »Imeli smo osebo v Bostonu, Harry in jaz smo bili doma v New Jerseyju, na zahodni obali pa še eno osebo. Hči je enkrat prišla v našo klet in me vprašala, kaj počnem. 'Delamo na daljavo,' sem ji rekel. Res ni mogla verjeti. "

Free-D in nestvarni motor

Za vključitev realističnih studijskih sklopov VR v produkcijo v živo je nujno zajemanje natančnih podatkov o pozicioniranju kamere. Pred predstavitvijo prve predstavitve za Panasonic je DisruptAR razvil gonilnik Free-D, ki bi omogočil neposredno priključitev PTZ kamere AW-UE150 4K Pro v Unreal Engine, kar mu je omogočilo, da izpiše informacije Pan / Tilt / Zoom / Iris prek IP-ja (UDP) neposredno iz kamere v sistem za sledenje Unreala v živo brez potrebe po dodatnih senzorjih ali kodirnikih.

"Free-D je prišel iz BBC-ja v zgodnjih devetdesetih kot protokol za sledenje enemu od njihovih sistemov za sledenje kamer," pojasnjuje Lacombe. “Določa šest stopenj svobode - pomikanje, nagibanje, zavijanje, X, Y, Z, pa tudi vidno polje, povečavo in ostrenje. Te vrednosti se pošljejo v navidezni mehanizem upodabljanja in povežejo z navidezno kamero, tako da se vaše ozadje v realnem času ustrezno odzove s hitrostjo 60 sličic na sekundo. "

Po Lacombejevih besedah ​​je bil nestvarni motor vseskozi uporabljen v številnih produkcijah - od Kralja levov do Mandalorijana. "To je osnovna tehnologija, ki jo trenutno uporablja večina Hollywooda," pravi Lacombe. "Večinoma ga uporabljajo kot strežnik proxy, cilj pa je" končni slikovni pik ", kar je tisto, kar vidite v realnem času, kar je na zaslonu."

Protokol Free-D določa šest stopenj svobode - premikanje, nagibanje, zavijanje XYZ, pa tudi vidno polje, povečavo in ostrenje.

"Unreal Engine je igralni mehanizem, ki je bil uporabljen na drugih trgih, vključno z arhitekturo, CAD vizualizacijo in v tem primeru oddajanjem in filmom," pravi Lacombe. »Z njim dosežemo najvišjo raven fotorealizma, pri čemer uporabljamo sredstva iz tradicionalnih orodij DCC, kot so Maya, 3D Studio Max, Blender, z uporabo grafičnih kartic NVIDIA s hitrostjo 60 sličic na sekundo, kar gledalcem zagotavlja zvestobo lastnosti leč, kot so cvetenje, rakete in odstranjevanje ostrenja. Kakovost, ki jo potrebujete za fotorealizem in upodabljanje s hitrostjo 60 sličic na sekundo, je v bistvu tisto, kar počne Unreal Engine. "

Ustvarjanje navideznega sveta… v garaži

Lacombejev studio je v njegovi preurejeni garaži, ki meri le 20 x 24, njegova posadka pa je bila sestavljena iz samo enega asistenta. Za zeleni zaslon je uporabil prenosno ozadje Pro Cyc. Zaradi prostorske omejitve je Laiz lahko hodil le nekaj korakov, zato so bili omejeni na kamere, zaradi česar je bil AW-UE150 popolno orodje za to delo. Za osvetlitev zelenega zaslona je Lacombe uporabil 14-palčne LED plošče. "Ideja je, da si res želite imeti en odtenek zelene in se znebiti vse pegavosti, da bo vaš ključ lahko obdržal te sence," pojasnjuje Lacombe. "Izberete eno zeleno, ki jo želite izpisati, temnejše zelene pa so sence, prekrite v vašem navideznem nizu."

Čeprav je delal v majhnih mejah svoje garaže, je moral svoj talent osvetliti z motivirano lučjo velikega studia. Za osvetlitev Laiza je Lacombe za ključ in polnilo uporabil dve LED plošči. Z nekaj reflektorji od zgoraj je uporabil tudi rdečo svetlobo, ki prihaja iz oken. "V bistvu se trudimo uskladiti to smer in barvno temperaturo, ne da bi vplivali na zeleni zaslon," razkrije Lacombe. »To je izziv, ker poskušate talent osvetliti ločeno od zelenega zaslona. Vrata hlevov na teh LED-jih so nam dajala več prostora, vendar smo se borili, da bi se umaknili od zelenice in se minimalno odbili od zelenice na njena oblačila in kožo. "

Na snemanju je Lacombe uporabil dve kameri UE150 - kamera 1 je bila na levi strani, kamera 2 pa na desni.

Na snemanju je Lacombe uporabil dve kameri UE150: kamera 1 je bila na levi strani, kamera 2 pa na desni. Ko se je Zoe obrnila proti upravitelju izdelkov, ki ga gleda na navpičnem monitorju, je preklopil na drugo kamero v Laizovih očeh, da bi dobil simulirano stališče vodje izdelkov. Ujemanje očesnih črt je izziv, vendar Lacombe pravi, da bi ga lahko malo prevaral, če bi vedel, kje je njegov domači položaj. »Če ste imeli dve kameri, ena je bila 90 stopinj druga oddaljena osem metrov stran, druga pa štiri metre stran, lahko merite s trakom in ju postavite v navidezni svet v isti položaj. Med seboj se bodo držali zakonov fizike, tako da bodo videti, kot da so v takem položaju. In potem lahko v teh smernicah malo varaš. "

Oblikovanje produkcije s klikom na gumb

Za oblikovanje virtualnega kompleta je Lacombe uporabil spremenjen dizajn, da je v zadnjem letu sodeloval z drugo stranko. Zasnova je bila narejena v Mayi in izvožena v Unreal. Ker navidezni nabor poteka ponoči, so sprva imeli temnejši videz, nato pa so se odločili, da ga popestrijo. Dodal je logotip Panasonic in odnesel elemente, ki niso bili bistveni za komplet Panasonic. Dodal je tudi monitor, ki prihaja iz tal, na katerega Laiz odide izza njega.

Po mnenju Lacombeja je pri ustvarjanju lastnega navideznega nabora na voljo več 3D sredstev, saj je spletna arhitekturna vizualizacija resnično začela. Obiščete lahko knjižnico 3D in poiščete 3D sredstva ali modele ter jih sestavite, odvisno od vaših zahtev po prilagoditvi. "S stranko gre res naprej in nazaj," razloži Lacombe. »Dodate svoje marketinške komponente, blagovno znamko, vse barve in materiale. Ko je sredstvo tam, lahko z gumbom odstranite stene, kliknete ali premikate stvari, monitorje prilagodite v realnem času. V "fizičnem svetu" bi to trajalo precej časa in denarja. Ko je stvar že zgrajena, jo je enostavno prilagoditi in se vrniti k njej. "

Voditeljica Zoe Laiz intervjuva s vodjo produkta Steveom Coopermanom o novostih in ustvarjanju vsebin.

Ohranjanje varne razdalje

Navidezna proizvodnja se je skozi desetletja razvijala z izkušnjami in dodelavo. Čeprav sta vlogi fizične in virtualne produkcije v bistvu enaki, je največja razlika v tem, da vsi delajo v istem fizičnem prostoru. Ko bo uredba o bivanju doma odpravljena, bo še vedno določeno, ali bo resnična proizvodnja na daljavo postala norma ali ne.

"Obstaja razlog, zakaj imate nekoga, ki gleda ključ, nekoga, ki gleda scenarij, nekoga, ki gleda kote kamere in garderobo," pravi Lacombe. Vse te vloge je še treba izpolniti in samo poskušamo najti najboljši način za to na daljavo. Zaenkrat se je izkazalo neverjetno dobro in vsi smo presenečeni nad tem, kako se je to tako hitro sestavilo in razvilo po naravni poti. Čeprav smo morali nositi več klobukov več, kot bi si želeli za to produkcijo, je naslednji logični korak, da to razširimo še dlje, da drugi sodelujejo, da izboljšajo in izboljšajo postopek. Toda prvič pred vrati sem zelo zadovoljen z rezultati in si želim, da bi prišel do naslednjega koraka. "

Če si želite ogledati Panasonicov virtualni dogodek, Prihodnost video produkcije , kliknite tukaj.

Za več informacij o DisruptAR obiščite www.disruptar.com.