Izložba proširene stvarnosti: kako je Panasonic to učinio na daljinu s AR

Proširena stvarnost u pomoć. Otkazivanje NAB-a 2022-2023 zbog pandemije COVID-19 izazvalo je udarne valove u cijeloj industriji emitiranja. Godišnje se održava u Las Vegasu, NAB Show je najveći emitirani sajam s preko 90 000 sudionika iz preko 160 zemalja. Većina od 1.600 izlagača lansira nove proizvode i tehnologije, a za mnoge velike tvrtke uspostavljeno je do šest mjeseci planiranja. U vrlo kratkom vremenskom roku, tim Panasonic Pro Video morao je smisliti alternative za iznošenje svoje poruke dok je radio na daljinu od kuće.

Audio + Video + IT. Naši urednici stručnjaci su za integriranje zvuka, videa i IT-a. Dobijte svakodnevne uvide, vijesti i profesionalno umrežavanje. Pretplatite se na Pro AV danas

U danima koji su prethodili otkazivanju NAB Showa, Panasonicov tim počeo je razmatrati mogućnosti za zamjenski događaj, uključujući ideju o izgradnji fizičke kabine u kojoj bi kupci mogli posjećivati ​​mrežu. Tim Panasonic Pro Video također je razgovarao s Paulom Lacombeom, izvršnim direktorom DisruptAR-a sa sjedištem u Novoj Engleskoj, koji se specijalizirao za stvaranje virtualnih produkcija. Započevši karijeru u General Motorsu nakon fakulteta, Lacombe već 30 godina radi u proizvodnoj industriji, počevši od tvrtke Silicon Graphics krajem 80-ih, prije nego što se samostalno odvažio baviti se virtualnom produkcijom. DisruptAR je usredotočen na smanjenje proizvodnih troškova AR-a i VR-a za šire tržište.

  • Streaming infrastruktura tvrtke Esports Training Factory
  • Citizen Cope predstavio je koncertni prostor zaštićen Covidom
  • Daljinsko učenje: kako natjerati daljinski orkestar da radi
  • Najbolje PTZ kamere za streaming uživo

16. ožujka, New Jersey, u kojem je sjedište Panasonicovog američkog sjedišta, službeno je zaključan; 18. ožujka Lacombe je zakazao prvi demo za Panasonicov tim. NAB Show 2022-2023 otkazan je 20. ožujka. "

Morali smo vrlo brzo odlučiti između dvije opcije ”, otkriva Panasonicov inženjerski menadžer Harry Patel. “Prva opcija zahtijevala je fizičku izgradnju kabine, dovođenje proizvoda uz poštivanje zahtjeva za socijalno distanciranje (manje od 10 ljudi odjednom) i dovođenje filmske ekipe. Nije bilo praktično i željeli smo učiniti nešto kvalitetnije, iako nismo mogli napustiti svoje domove. Tako se konačno raspravljalo o ovoj ideji virtualnog događaja koja je odobrena do kraja ožujka. "

Paul Lacombe iz DisruptAR-a radi virtualni demo od svog doma koristeći Free-D protokol.

Proširena stvarnost i daljinska proizvodnja

Daljinska proizvodnja nije novi koncept. Redatelj Francis Ford Coppola slavno je režirao i montirao mnoge scene iz svog filma iz 1982. godine "Jedan od srca" iz najave u blizini seta. Ali stvaranje produkcije na daljinu od kuće tijekom globalne pandemije je druga priča. To je bilo moguće samo korištenjem vrhunske tehnologije fotoaparata, VR gaming motora i aplikacija temeljenih na oblaku.

Panasonicu je prvi cilj bio stvoriti jasnu poruku verbalnom i pisanom komunikacijom prevedenom u vizualniji video format. U NAB-u bi prodavači obično komunicirali s kupcima na izložbenom prostoru razgovarajući o rješenjima problema svake osobe. Voditelj marketinške grupe Jim Wickizer i agencija P.R., Racepoint Global, uspjeli su iznijeti dosljednu poruku i surađivali su s pojedinačnim voditeljima proizvoda kako bi predstavili prave točke razgovora.

Patel i Wickizer također su započeli suradnju s Lacombeom iz njegovog matičnog studija kako bi stvorili video intervjue između voditelja proizvoda i voditeljice studija Zoe Laiz, koja je trebala razgovarati o novim proizvodima i tehnologiji. "Svi smo imali izazovna proizvodna okruženja, ali ako smo to učinili na daljinu prema ovom rasporedu, to je definitivno bio skok vjere", objašnjava Lacombe. "U svom sam crijevu znao da ovo može uspjeti, ali nikad prije nisam to zabrinjavao."

Lacombe je svoju garažu dimenzija 20 'x 24' preuredio u prostor studija.

Za daljinsko snimanje, svaki je menadžer proizvoda dobio prijenosno računalo, Blue Yeti USB mikrofon i profesionalnu PTZ kameru Panasonic AW-HE42 Full-HD. HE42 je povezan putem Etherneta i PTZ virtualnog USB upravljačkog programa, a video je u prijenosno računalo korišten OBS za snimanje i TeamViewer za daljinsko upravljanje.

Proširena stvarnost i MS timovi

Za komunikaciju, dijeljenje datoteka, pregled demonstracija i praćenje izdavanja na daljinu, Panasonic je upotrijebio Microsoft Teams, platformu za komunikaciju i suradnju. Preko noći, platforme kao što su Teams, Zoom, Ring Central i mnoge druge omogućile su ljudima i tvrtkama da sigurno komuniciraju s vanjskim svijetom iz svojih domova.

Kako bi pogledao što je Lacombe snimao na setu tijekom proizvodnje, Patel je koristio Teams Screen share stvarajući četverostruko dijeljenje pomoću izlaza AV-UHS500 prebacivača na pretvarački pretinac sa SDI na USB. USB feed predstavljen je u sustavu Windows kao feed kamere, koji su dijelili putem timova.

Dok su nadzirali snimku uvodne riječi višeg potpredsjednika, Profesionalnih slika i vizualnih sustava Johna Baisleyja, Pateli i Wickizer mogli su putem timova uživo gledati Baisleyevu dnevnu sobu i dati smjer je li riječ o pogrešci u čitanju crte, promjeni pozadine ili tehničkoj problem sa zvukom. Kroz timove, Patel je također mogao pružiti smjer zaslona promatrajući zeleni zaslon i virtualne postavljene poglede. "Ako je Zoey stajala točno iza vrata i ulazi, doista bismo mogli vidjeti je li pucanj dobar", objašnjava Patel. "Rekao bih Paulu kroz timove," Moglo bi uspjeti ako se malo pomakne udesno. "Što se tiče daljinske suradnje, mislim da to ne bi bilo moguće bez upotrebe timova."

Dok je viši potpredsjednik, Professional Imaging & Visual Systems John Baisley snimao svoju uvodnu riječ, tim je mogao uživo gledati Baisleyevu dnevnu sobu i pružati smjernice putem Microsoftovih timova.

"Bilo je prilično cool raditi ovo na daljinu", dodaje Wickizer. “Imali smo osobu u Bostonu, Harry i ja bili smo u svojim domovima u New Jerseyu, a imali smo još jednu osobu na zapadnoj obali. Moja je kći jednom sišla u naš podrum i pitala što radim. 'Radimo daljinsku proizvodnju', rekao sam joj. Zaista nije mogla vjerovati. "

Free-D i nestvarni motor

Za uključivanje realističnih VR studijskih setova u produkciju uživo presudno je snimanje točnih podataka o pozicioniranju fotoaparata. Prije nego što je predstavio svoj prvi demo za Panasonic, DisruptAR je razvio Free-D upravljački program koji će omogućiti da se AW-UE150 4K Pro PTZ kamera priključi izravno u Unreal Engine, što mu je omogućilo izlaz podataka o Pan / Tilt / Zoom / Iris putem IP-a (UDP) izravno s kamere na Unreal-ov sustav praćenja uživo bez potrebe za dodatnim senzorima ili enkoderima.

"Free-D došao je s BBC-a početkom 90-ih kao protokol praćenja za jedan od njihovih sustava za praćenje kamera", objašnjava Lacombe. „Definira šest stupnjeva slobode - pomicanje, nagib, kotrljanje, X, Y, Z, kao i vidno polje, zum i fokus. Te se vrijednosti šalju u virtualni mehanizam za prikazivanje i povezuju s virtualnom kamerom, tako da vaša pozadina u skladu s tim reagira u stvarnom vremenu brzinom od 60 sličica u sekundi. "

Prema Lacombeu, nestvarni se motor koristio u svim produkcijama - od Kralja lavova do Mandalorijanaca. "To je temeljna tehnologija koju trenutno koristi većina Hollywooda", kaže Lacombe. "Većinom ga koriste kao proxy, ali cilj je" konačni piksel ", što je sve što vidite u stvarnom vremenu na zaslonu."

Protokol Free-D definira šest stupnjeva slobode - pomicanje, naginjanje, okretanje XYZ, kao i vidno polje, zum i fokus.

"Unreal Engine je motor za igre koji se primjenjuje na drugim tržištima, uključujući arhitekturu, CAD vizualizaciju, a u ovom slučaju emitiranje i film", kaže Lacombe. „Koristimo ga za dosezanje najviše razine fotorealizma, uzimajući sredstva od tradicionalnih DCC alata poput Maye, 3D Studio Max, Blender, koristeći NVIDIA grafičke kartice brzinom od 60 sličica u sekundi, pružajući gledateljima vjernost karakteristika leća poput cvjetanje, bljesak i de-fokusiranje. Kvaliteta koja vam je potrebna za postizanje fotorealizma i prikazivanja pri 60 sličica u sekundi u osnovi je ono što Unreal Engine radi. "

Stvaranje virtualnog svijeta … u garaži

Lacombeov studio nalazi se u njegovoj preuređenoj garaži dimenzija samo 20 x 24, a njegova se posada sastojala od samo jednog pomoćnika. Za zeleni zaslon koristio je Pro Cyc Portable pozadinu. Zbog ograničenja prostora, Laiz je mogao prijeći samo nekoliko koraka, tako da su bili ograničeni na kamere, što je AW-UE150 učinio savršenim alatom za posao. Osvjetljavajući svoj zeleni zaslon, Lacombe je koristio 14 "LED ploče. "Ideja je da doista želite imati jednu nijansu zelene i riješiti se svih ljigavosti kako bi vaš ključ mogao zadržati te sjene", objašnjava Lacombe. "Odaberite jednu zelenu koju želite otkucati, a tamnije zelene boje sjene su prekrivene u vašem virtualnom skupu."

Iako je radio u malim granicama svoje garaže, svoj je talent morao osvijetliti motiviranim svjetlom velikog studija. Da bi osvijetlio Laiza, Lacombe je upotrijebio dvije LED ploče za ključ i punjenje. Također je upotrijebio nekoliko reflektora odozgo za simuliranje crvenkaste svjetlosti koja je dopirala s prozora. "U osnovi pokušavamo uskladiti taj smjer i tu temperaturu boje, a da pritom ne utječemo na zeleni zaslon", otkriva Lacombe. „To je izazov jer pokušavate talent osvijetliti odvojeno od zelenog ekrana. Vrata staje na tim LED-ima davala su nam više prostora, ali borili smo se da se maknemo od zelenice i minimalno se odbijemo od zelene na njezinu odjeću i kožu. "

Na snimanju je Lacombe koristio dvije kamere UE150 - kamera 1 bila je s lijeve strane, a kamera 2 s desne.

Na snimanju je Lacombe koristio dvije kamere UE150: kamera 1 bila je s lijeve strane, a kamera 2 s desne. Kad bi se Zoe okrenula prema upravitelju proizvoda koji se gleda na okomitom monitoru, prebacio bi se na kameru dva u Laizovoj razini očiju kako bi dobio simuliranu točku gledišta voditelja proizvoda. Podudaranje linija očiju je izazov, ali Lacombe kaže da bi to mogao malo prevariti znajući gdje mu je postavljena početna pozicija. “Ako ste imali dvije kamere, jedna je bila 90 stupnjeva do druge na osam metara, a druga je udaljena četiri metra, možete izmjeriti vrpcom i postaviti ih u virtualni svijet u isti položaj. Oni će se pridržavati zakona fizike tako da izgledaju kao da su u točnom položaju. A onda možete malo varati u okviru tih smjernica. "

Dizajn produkcije klikom na gumb

Za dizajn virtualnog seta Lacombe je koristio modificirani dizajn koji je radio s drugim klijentom protekle godine. Dizajn je rađen u Mayi i izvežen u Unreal. Budući da se virtualni set odvija noću, isprva su imali tamniji izgled, no onda su odlučili učiniti ga dodirom svjetlijim. Dodao je Panasonicov logotip i oduzeo elemente koji nisu bili bitni za Panasonicov set. Također je dodao monitor koji izlazi iz poda na koji Laiz izlazi iza njega.

U stvaranju vlastitog virtualnog skupa, prema Lacombeu, dostupno je više 3D sredstava budući da je mrežna arhitektonska vizualizacija doista uzela maha. Možete otići u 3D knjižnicu i pronaći 3D elemente ili modele i izraditi ih ovisno o vašim zahtjevima za prilagodbu. "To je stvarno naprijed-nazad s klijentom", objašnjava Lacombe. “Dodajete svoje marketinške komponente, brendiranje, sve boje i materijale. Nakon što stavite materijal, možete rušiti zidove gumbom, kliktati ili premještati stvari, prilagoditi sve monitore u stvarnom vremenu. U 'fizičkom svijetu' to bi zahtijevalo znatnu količinu vremena i novca. Jednom kada napravite stvar, lako je prilagoditi se i vratiti joj se. "

Voditeljica Zoe Laiz intervjuirajući s voditeljem proizvoda Steveom Coopermanom o vijestima i stvaranju sadržaja.

Držati sigurnu udaljenost

Virtualna proizvodnja evoluirala je tijekom desetljeća iskustvom i usavršavanjem. Iako su uloge fizičke i virtualne proizvodnje u osnovi iste, najveća je razlika u tome što svi rade u istom fizičkom prostoru. Jednom kada se ukine uredba o zadržavanju kod kuće, hoće li istinska daljinska proizvodnja postati norma ili ne, još se utvrđuje.

"Postoji razlog zašto netko gleda ključ, netko gleda scenarij, netko gleda kutove kamere i ormar", kaže Lacombe. Sve te uloge još treba ispuniti, a mi samo pokušavamo otkriti najbolji način da to učinimo na daljinu. Do sada je to djelovalo nevjerojatno dobro i svi smo iznenađeni kako se ovo tako brzo spojilo i razvilo na prirodan način. Iako smo morali nositi više šešira više nego što bismo željeli za ovu proizvodnju, sljedeći je logičan korak distribucija još više kako bi se uključili i drugi da usavrše i poboljšaju postupak. Ali prvi put izvan vrata, vrlo sam zadovoljan rezultatima i nestrpljiv da pređem na sljedeći korak. "

Da biste gledali Panasonicov virtualni događaj, Budućnost video produkcije , kliknite ovdje.

Za više informacija o DisruptAR posjetite www.disruptar.com.

Zanimljivi članci...