福斯電視台如何將虛擬製作應用在 FOX NFL Sunday 美國體育電視節目
一個LED舞台、十六個Unreal Engine、負責四台攝影機的即時算圖。另外有七個只負責AR的Unreal Engine,之前從沒有這麼做過,無論在哪、都沒人這麼做。福斯體育台(Fox Sports)敢為人先、與眾不同,勇於冒險。同樣的運動、新的態度,是福斯體育台的基本精神,如此這般已經28年,這可說是福斯體育台的核心DNA。
福斯體育台是美國一些主要體育聯盟中,最大的廣電業者之一,從世界錦標賽、到超級盃,到到世界盃等。福斯體育台努力讓自己與眾不同,成為講故事的人,但同時也嘗試提供觀賞者,以不同的角度看待事物。
五、六年前福斯體育台參加NAB展,在那裡,他們看到Unreal Engine與其他技術結合的展示,第一次瞭解到虛擬場景有可能可實現。
福斯體育台從那回來之後,說服了老闆,他們在北卡夏洛特市有一個的緊密生態,有一個完美的機會,可試驗這樣的技術,看看是否能用它來做些什麼。福斯體育台一直在想,在未來的道路上,在更大的節目使用它、擁有更多的觀眾,那將是他們主要的節目:福斯美式足球週日賽事(Fox NFL Sunday)。雖然此節目的設計過程中,一向都是採用綠幕,基本上他們將重建夏洛特市所擁有的,因為他們熟悉那種工作流程。但關於LED及XR有著許多聲浪,他們看了一些早期的展示,看了之後,就覺得:那就是他們要的。如果在安裝綠幕時沒有做到這一點那就會被淘汰。
他們有很多事要處理,有多個合作供應商,合作廠商已做了一部份他們在做的事,但沒有達到他們的規模,也沒有達到他們在即時(Real Time)方面想要的水準。對於即時的實況運動賽事而言,設置很難做好計畫,開賽前所決發生的事,決定了接下來所發生的事。
執行副總創意導演Gary Hartley說“我在副控室的第一個星期天,我覺得,如此工作簡直是要瘋了。同時有很多人、同時做很多事,並同時跟很多人對談。我保證,如果你沒有進到那裡,你絕對無法理解。”
擁有一個虛擬舞台的一大好處是,可以改變你所處的整個世界。在實況轉播時,你沒有太多的時間可以停下來重新佈置。也許只有他們在播帶時的兩、三分鐘。從綠幕換成LED最大的轉變是在直播的部分,導播必須真實的看到他們要Take的攝影機畫面,需要某種型式的預覽(Preview)。如果一台攝影機進行某特定角度的算圖,並顯示在LED牆上,另一台攝影機則沒有算圖顯示。
從沒見過有人在虛擬舞台用多台攝影機,一直以來都是由一台攝影機追蹤,並那裡進行所需要的操作。因此,這就是GhostFrame技術的用途,它是讓實況轉播成為可能的秘密武器。
LED的更新率是240 Hertz,GhostFrame讓你能將它細分為60 Hertz的增量,讓他們能將每一台攝影機分割開來,每格四個影格拍攝一次。儘管LED牆上的影像對演員來說是模糊的,但他們仍然可以辨識得出來,事實上,這對他們有很大的幫助。
每一台攝影機的輸出,都有自己的視角相對應的追蹤資料,要驅動整個LED牆,一台攝影機有四個引擎,而他們有四台攝影機、每一台機器都輸出4K。大多數人都有4K電視,它是你的整個螢幕,但卻只是他們LED牆的一部份。在那樣的解析度之下,要維持每秒60個影格,其本身就是一種挑戰。在此基礎之上,還有七個合成引擎,接收攝影機的影像,並將AR圖層疊加至該場景中。然後另外還有兩個Unreal Engine用於顯示器,以一個獨特的通道,顯示視差(Parallax)。
在現場共有二十五個Unreal Engine。你可想見,這是一個相當複雜的管理。他們使用Erizos控制Unreal專案的載入。因為相同的專案必須在十六台不同的電腦同時載入,當啟動一個專案時必須推送出去,並通知播放,以便讓節目開始進行。
他們也有七台具追蹤的攝影機,使用stYpe的Spider追蹤系統。stYpe提供Unreal的外掛程式,讓他們能將環境映射(Map)至LED牆上。同時,他們有三個牆面跟一塊地板,這個外掛程式讓環境能完美的呈現,不會看到接縫、色彩都很匹配,顯得很自然。在Unreal平台上零失誤的日復一日執行工作,這是對Epic能力的一種讚賞
走進LED舞台,並可在幾秒之內,切換到另一個環境,完全身處另一個場景,是絕對是令人驚艷的效果。感覺很真實,獲得真實的燈光,演員都非常興奮。因為他們看到的可能性、看到了最終將呈現的結果,讓演員能與XR及AR互動。而正是福斯體育台想做到的事。
如果這套系統的壽命是十年,福斯體育台就有十年的時間可進行創新,就有獨特的地位與業界一起成長。很顯然的,Unreal提供了他們所有的基礎,在此之上奠定了他們的未來,因為即時(Real Time)就是未來。
Gary Hartley說“除了福斯體育,我不知道其他人怎麼想,但對我來說,很顯然的即時將成為我們製作的元素。”
Comments