Paplašinātās realitātes izstāde: kā Panasonic to paveica attālināti ar AR

Papildināta realitāte glābšanai. NAB 2022-2023 atcelšana COVID-19 pandēmijas dēļ izraisīja trieciena viļņus visā apraides nozarē. Katru gadu Lasvegasā notiekošā NAB Show ir lielākā apraides izstāde, kurā piedalās vairāk nekā 90 000 apmeklētāju no vairāk nekā 160 valstīm. Lielākā daļa no 1600 izstādes dalībniekiem izlaiž jaunus produktus un tehnoloģijas, un daudziem lieliem uzņēmumiem tiek plānots līdz sešiem mēnešiem. Ļoti īsā laika posmā Panasonic Pro Video komandai bija jānāk klajā ar alternatīvām, lai saņemtu ziņojumu, strādājot attālināti no mājām.

Audio + Video + IT. Mūsu redaktori ir eksperti audio, video un IT integrēšanā. Saņemiet ikdienas ieskatus, jaunumus un profesionālus tīklus. Abonējiet Pro AV šodien

Dienās pirms NAB izstādes atcelšanas Panasonic komanda sāka meklēt iespējas, kā rīkot aizstājēju, tostarp ideju par fiziskas kabīnes izveidošanu, kur klienti varētu apmeklēt tiešsaistē. Panasonic Pro Video komanda piedalījās diskusijās arī ar Ņūanglijā bāzētās DisruptAR izpilddirektoru Polu Lakombi, kurš specializējas virtuālo produkciju veidošanā. Pēc karjeras sākšanas General Motors karjeru Lacombe jau 30 gadus strādā ražošanas nozarē, sākot no 80. gadu beigām Silicon Graphics, pirms pats mēģina turpināt virtuālo ražošanu. DisruptAR ir vērsts uz AR un VR ražošanas izmaksu samazināšanu plašākā tirgū.

  • Esports Training Factory straumēšanas infrastruktūra
  • Citizen Cope debitē Covid-safe koncertu telpā
  • Attālināta mācīšanās: kā panākt, lai tālvadības orķestris darbotos
  • Labākās PTZ kameras tiešraides straumēšanai

16. martā Ņūdžersijā, kur atrodas Panasonic ASV galvenā mītne, oficiāli tika slēgts; 18. martā Lakombe ieplānoja pirmo demonstrāciju Panasonic komandai. NAB izstāde 2022-2023 tika atcelta 20. martā. “

Mums ļoti ātri bija jāizlemj starp abiem variantiem, ”atklāj Panasonic inženiertehniskais vadītājs Harijs Patels. “Pirmais variants prasīja fizisku kabīnes uzcelšanu, produkta ievešanu, vienlaikus ievērojot sociālās distancēšanās prasības (mazāk nekā 10 cilvēki vienlaikus) un piesaistot filmēšanas grupu. Tas nebija praktiski, un mēs vēlējāmies kaut ko darīt kvalitatīvāk, kaut arī nevarējām pamest savas mājas. Tātad, visbeidzot, šī virtuālā pasākuma ideja tika apspriesta tālāk un tika apstiprināta līdz marta beigām. ”

Traucējiet AR Pauls Lacombe, veicot virtuālu demonstrāciju no savām mājām, izmantojot Free-D protokolu.

Paplašinātā realitāte un attālā ražošana

Attālā ražošana nav jauna koncepcija. Režisors Frensiss Fords Kopola slavenā režijā un rediģēja daudzas ainas no savas 1982. gada filmas “Viens no sirds” no treilera netālu no filmēšanas laukuma. Bet iestudējuma radīšana attālināti no mājām globālās pandēmijas laikā ir cits stāsts. Tas bija iespējams tikai, izmantojot vismodernāko kameru tehnoloģiju, VR spēļu dzinējus un mākoņa bāzes lietotnes.

Panasonic pirmais mērķis bija izveidot skaidru ziņojumu ar verbālu un rakstisku saziņu, kas iztulkota vizuālākā video formātā. NAB pārdevēji parasti sazinājās ar klientiem izstādes stāvā, apspriežot katras personas problēmu risinājumus. Mārketinga grupas vadītājs Džims Vikijers un P.R. aģentūra Racepoint Global spēja nākt klajā ar konsekventu vēstījumu un sadarbojās ar atsevišķiem produktu vadītājiem, lai iepazīstinātu ar pareizajiem sarunu punktiem.

Patels un Vikijers arī sāka strādāt ar Lakombu attālināti no savas mājas studijas, lai izveidotu video intervijas starp produktu vadītājiem un studijas vadītāju Zoju Laizu, kurai bija jāapspriež jauni produkti un tehnoloģijas. "Mums visiem ir bijusi izaicinoša ražošanas vide, taču, lai to paveiktu attālināti, izmantojot šo grafiku, tas noteikti bija ticības lēciens," skaidro Lakombe. "Zarnās es zināju, ka tas varētu darboties, bet nekad iepriekš to nedarīju.

Lakombe pārveidoja savu 20 'x 24' garāžu par studijas telpu.

Attālai ierakstīšanai katrs produktu menedžeris saņēma klēpjdatoru, USB mikrofonu Blue Yeti un Panasonic AW-HE42 Full-HD Professional PTZ kameru. HE42 tika savienots, izmantojot Ethernet un PTZ virtuālo USB draiveri, un video tika ievietots klēpjdatorā, izmantojot OBS, lai ierakstītu, un TeamViewer tālvadībai.

Paplašinātās realitātes un MS komandas

Saziņai, failu koplietošanai, demonstrāciju demonstrēšanai un attālo ražošanas dzinumu uzraudzībai Panasonic izmantoja komunikācijas un sadarbības platformu Microsoft Teams. Pa nakti tādas platformas kā Teams, Zoom, Ring Central un daudzas citas ir ļāvušas cilvēkiem un uzņēmumiem droši sazināties ar ārpasauli no savām mājām.

Lai skatītu, ko Lacombe filmēšanas laikā fiksēja komplektā, Patel izmantoja Teams Screen daļu, izveidojot kvadrāta sadalījumu, izmantojot AV-UHS500 komutatora izvadi uz pārveidotāja lodziņu no SDI uz USB. USB plūsma tika parādīta sistēmā Windows kā kameras plūsma, kuru viņi kopīgoja, izmantojot komandas.

Uzraugot vecākā viceprezidenta, profesionālo attēlveidošanas un vizuālo sistēmu, Džona Baislija sākuma vārdu ierakstu, caur Teams Patel un Wickizer varēja tiešraidē apskatīt Baisley viesistabu un sniegt norādes neatkarīgi no tā, vai tā bija līnijas lasīšanas kļūda, fona maiņa vai tehniska skaņas problēma. Izmantojot komandas, Patels varēja arī nodrošināt ekrāna virzienu, novērojot gan zaļā ekrāna, gan virtuālo iestatījumu skatus. "Ja Zoey stāvētu tieši aiz durvīm un ienāktu, mēs tiešām varētu redzēt, vai šāviens bija labs, vai ne," skaidro Patels. "Es teiktu Pāvilam, izmantojot komandas:" Tas varētu darboties labāk, ja viņa pārietu tikai mazliet pareizi. "Attālās sadarbības ziņā es nedomāju, ka tas nebūtu bijis iespējams, neizmantojot komandas."

Kamēr profesionālo attēlveidošanas un vizuālo sistēmu vecākais viceprezidents Džons Baislijs ierakstīja savas atklāšanas runas, komanda varēja tiešraidē apskatīt Baisley viesistabu un nodrošināt norādes, izmantojot Microsoft Teams.

"Tas bija diezgan forši, to darot attālināti," piebilst Vikizers. "Mums bija cilvēks Bostonā, mēs ar Hariju bijām savās mājās Ņūdžersijā, un mums bija vēl viena persona rietumu krastā. Mana meita reiz nokāpa mūsu pagrabā un jautāja, ko es daru. "Mēs veidojam attālu ražošanu," es viņai teicu. Viņa tiešām tam neticēja. ”

Free-D un nereālais dzinējs

Lai reālistiskus VR studijas komplektus iekļautu tiešraidē, ir svarīgi uzņemt precīzus kameras pozicionēšanas datus. Pirms pirmā Panasonic demonstrācijas demonstrēšanas DisruptAR izstrādāja Free-D draiveri, kas ļautu AW-UE150 4K Pro PTZ kameru pievienot tieši Unreal Engine, kas viņam nodrošināja iespēju izvilkt informāciju Pan / Tilt / Zoom / Iris izmantojot IP (UDP) tieši no kameras uz Unreal izsekošanas sistēmu tiešraidē bez papildu sensoru vai kodētāju nepieciešamības.

"Free-D nāca no BBC vēl 90. gadu sākumā kā izsekošanas protokols vienai no viņu kameru izsekošanas sistēmām," skaidro Lakombe. “Tas nosaka sešas brīvības pakāpes - panoramēšanu, slīpumu, ritināšanu, X, Y, Z, kā arī redzes lauku, tālummaiņu un fokusu. Šīs vērtības tiek nosūtītas uz virtuālās renderēšanas motoru un savienotas ar virtuālo kameru, lai jūsu fons atbilstoši reaģētu reāllaikā ar ātrumu 60 kadri sekundē. "

Pēc Lacombe teiktā, nerealais motors ir izmantots visā pasaulē daudzos iestudējumos - sākot no The Lion King līdz The Mandalorian. "Tā ir pamatā esošā tehnoloģija, kuru šobrīd izmanto lielākā daļa Holivudas," saka Lakombe. "Viņi to lielākoties izmanto kā starpniekserveri, bet mērķis ir" pēdējais pikseļi ", kas ir tas, ko redzat reāllaikā, tas ir tas, kas atrodas ekrānā."

Free-D protokols nosaka sešas brīvības pakāpes - panoramēšanu, slīpumu, XYZ ritināšanu, kā arī redzes lauku, tālummaiņu un fokusu.

"Unreal Engine ir spēļu dzinējs, kas ir izmantots citos tirgos, ieskaitot arhitektūru, CAD vizualizāciju un šajā gadījumā apraidi un filmas," saka Lakombe. “Mēs to izmantojam, lai sasniegtu visaugstāko fotoreālisma līmeni, izmantojot aktīvus no tradicionālajiem DCC rīkiem, piemēram, Maya, 3D Studio Max, Blender, izmantojot NVIDIA grafikas kartes ar ātrumu 60 kadri sekundē, nodrošinot skatītājiem tādu objektīva īpašību precizitāti kā: ziedoši, uzliesmojumi un fokusēšanas mazināšana. Kvalitāte, kas jums nepieciešama, lai sasniegtu fotorealismu un renderēšanu ar ātrumu 60 kadri sekundē, būtībā ir tas, ko dara Unreal Engine. ”

Virtuālās pasaules izveide … garāžā

Lakombes studija atrodas viņa pārveidotajā garāžā, kuras izmēri ir tikai 20 x 24, un viņa apkalpē bija tikai viens asistents. Zaļajam ekrānam viņš izmantoja Pro Cyc Portable fonu. Vietas ierobežojumu dēļ Laiz varēja staigāt tikai dažus soļus, tāpēc tie bija ierobežoti kamerām, padarot AW-UE150 par ideālu instrumentu šim darbam. Apgaismojot savu zaļo ekrānu, Lakombe izmantoja 14 ”LED paneļus. "Ideja ir tāda, ka jūs patiešām vēlaties, lai jums būtu viens zaļš nokrāsa un atbrīvotos no visām plankumainībām, lai jūsu atslēga varētu saglabāt šīs ēnas," skaidro Lakombe. "Jūs izvēlaties vienu zaļu krāsu, kuru vēlaties atslēgt, un tumšāki zaļumi ir ēnas, kas pārklātas jūsu virtuālajā komplektā."

Lai arī viņš strādāja nelielās garāžas telpās, viņam nācās iedegt talantu ar lielas studijas motivētu gaismu. Lai apgaismotu Laizu, Lakombe gan atslēgai, gan pildījumam izmantoja divus LED paneļus. Viņš arī izmantoja dažus prožektorus no augšas, lai imitētu sarkanīgu gaismu, kas nāk no logiem. "Būtībā mēs cenšamies saskaņot šo virzienu un krāsu temperatūru, vienlaikus neietekmējot zaļo ekrānu," atklāj Lakombe. "Tas ir izaicinājums, jo jūs mēģināt iedegt talantu atsevišķi no zaļā ekrāna. Kūts durvis uz šīm gaismas diodēm deva mums vairāk vietas, taču mēs cīnījāmies, lai izkļūtu no zaļās un dabūtu minimālu atlēcienu no zaļās uz viņas apģērba un ādas. ”

Komplektā Lacombe izmantoja divas UE150 kameras - 1. kamera bija kreisajā pusē un 2. kamera - labajā pusē.

Komplektā Lacombe izmantoja divas UE150 kameras: 1. kamera bija kreisajā pusē un 2. kamera - labajā pusē. Kad Zoē vērsīsies pret produktu vadītāju, kurš tiek skatīts uz vertikāla monitora, viņš pārslēdzās uz otro kameru Laiz acu līmenī, lai iegūtu imitētu produktu vadītāja skatupunktu. Acu līniju saskaņošana ir izaicinājums, taču Lakombe saka, ka varētu to nedaudz pievilt, zinot, kur atrodas viņa noteiktā mājas pozīcija. “Ja jums bija divas kameras, viena bija 90 grādu leņķī pret otru astoņu pēdu attālumā, bet otra - četru pēdu attālumā, varat izmērīt ar mērlenti un ievietot tās virtuālajā pasaulē tajā pašā pozīcijā. Viņi ievēros viens otru, izmantojot fizikas likumus, lai izskatās, ka atrodas tieši šajā pozīcijā. Un tad šajās vadlīnijās jūs varat nedaudz pievilt. ”

Produkcijas dizains, nospiežot pogu

Virtuālā komplekta noformējumam Lakombe izmantoja modificētu dizainu, ka viņš pagājušajā gadā strādāja ar citu klientu. Dizains tika izgatavots Maya un eksportēts uz Unreal. Tā kā virtuālais komplekts notiek naktī, vispirms viņiem bija tumšāks izskats, bet pēc tam viņi nolēma to padarīt gaišāku. Viņš pievienoja Panasonic logotipu un atņēma elementus, kas nebija svarīgi Panasonic komplektam. Viņš arī pievienoja monitoru, kas iznāk no grīdas, kuru Laizs iziet no aizmugures.

Veidojot savu virtuālo komplektu, saskaņā ar Lacombe teikto, ir pieejami vairāk 3D resursi, jo tiešsaistes arhitektūras vizualizācija patiešām ir sākusies. Varat doties uz 3D bibliotēku un atrast 3D līdzekļus vai modeļus un izveidot tos atkarībā no jūsu pielāgošanas prasībām. "Tas patiešām ir turp un atpakaļ ar klientu," skaidro Lakombe. “Jūs pievienojat mārketinga komponentus, zīmolu, visas krāsas un materiālus. Kad tur ir īpašums, varat ar pogu nojaukt sienas, noklikšķināt vai pārvietot lietas, reāllaikā pielāgot monitorus. “Fiziskajā pasaulē” tas prasītu ievērojamu laiku un naudu. Kad lieta ir izveidota, to ir viegli pielāgot un atgriezties. ”

Vadītāja Zoja Laiza intervē vecāko produktu vadītāju Stīvu Kūpermanu par jaunumiem un satura radīšanu.

Droša attāluma ievērošana

Virtuālā ražošana gadu desmitiem ir attīstījusies, pateicoties pieredzei un pilnveidošanai. Kaut arī fiziskās un virtuālās produkcijas lomas būtībā ir vienādas, lielākā atšķirība ir tā, ka visi strādā vienā un tajā pašā fiziskajā telpā. Pēc tam, kad ir atcelts rīkojums “palikt mājās”, joprojām tiek noteikts, vai patiesa attālā ražošana kļūs par normu.

"Ir iemesls, kāpēc jums ir kāds, kurš skatās atslēgu, kāds - skriptu, kāds - kameras leņķi un drēbju skapi," saka Lakombe. Visas šīs lomas joprojām ir jāpilda, un mēs tikai cenšamies noskaidrot labāko veidu, kā to paveikt attālināti. Līdz šim tas ir izdevies pārsteidzoši labi, un mēs visi esam pārsteigti, kā tas tik ātri sanāca un attīstījās dabiskā veidā. Lai gan mums nācās valkāt vairāk cepures, nekā mēs būtu vēlējušies šim iestudējumam, nākamais loģiskais solis ir to izplatīt vēl tālāk, lai citi iesaistītos procesa pilnveidošanā un uzlabošanā. Bet pirmo reizi ārpus vārtiem esmu ļoti apmierināts ar rezultātiem un ļoti vēlos spert nākamo soli. ”

Lai skatītos Panasonic virtuālo notikumu, Video ražošanas nākotne , noklikšķiniet šeit.

Lai iegūtu papildinformāciju par DisruptAR, apmeklējiet vietni www.disruptar.com.

Interesanti raksti...