日期:2022年3月18日
作者:Ben Davenport,Pixotope
Pixotope的Ben Davenport為NewscastStudio撰寫一系列專欄,這是他的第一篇,Ben分析了虛擬製作(Virtual Production - VP)的一些術語。
虛擬製作正成為一個熱門的詞彙,有一部分是受到COVID-19疫情的推動,正在建設的虛擬製作設施的數量、使用虛擬製作技術的製作數量,都顯著的增長,但它究竟是什麼?
專業術語“虛擬製作”包括用於創造沉浸式(Immersive)體驗的工具、方法及服務,將即時虛擬內容與現場視訊(Live Video)相結合。
這裡的關鍵因素是“即時(Real-Time)”- 在非即時的後期製作中,我們以VFX的形式在視訊中添加虛擬內容已經有很長一段時間了。在遊戲技術發展的推動下,現在比以往的任何時候都更容易獲得引擎和工具組,能將高品質、如照片般逼真的元素即時結合至現場視訊中。
圍繞於虛擬製作的詞彙,跟任何快速發展的技術一樣,也有許多不同的解釋與定義。事實上,即使是“虛擬製作(Virtual Production)”一詞,本身也經常與“視覺化製作(Virtualized Production)”、甚至“遠端製作(Remote Production)”等相混淆 - 兩者都與虛擬製作有關,但卻是截然不同的主題。
也許,要開始瞭解專業術語的最簡單方法就是:先看看目前所使用的虛擬製作的主要類型。
延展實境(Extended Reality – XR)
在談到虛擬製作時,XR將會佔據較大的篇幅,但它也是最令人感到困惑的術語之一。在視覺特效協會(Visual Effects Society - VES)及美國電影攝影師協會(American Society of Cinematographers - ASC)所創建的VP詞彙表(VP Glossary)中,將XR定義為“虛擬實境(Virtual Reality - VR)、擴增實境(Augmented Reality - AR)、混合實境(Mixed Reality - MR)的總稱,及此類技術所可能帶來的所有未來實境”。這是一個非常廣泛的定義,但事實上同一詞彙表,將XR視為等同於虛擬製作。
然而,最常見的是XR一詞被用來描述使用大型LED牆,創造真人可互動的虛擬環境。
VES/ASC VP詞彙表使用“ICVFX - In Camera Visual Effects(攝影機內視覺特效)”一詞來描述此類的製作。這個術語可能有點誤導,因為效果本身實際上並不在攝影機中。但作為一個術語,它確實強調了一個事實:攝影機的位置及運動,和LED牆上顯示的內容之間存在著一種關係。如果你思考一下,在房間裡的攝影機拍窗外,攝影機視野內能看到的窗外景象,取決於攝影機在房間裡的位置。對於XR或ICVFX來說亦是如此 - 合成虛擬環境的引擎接收到攝影機位置的資料,讓LED牆上顯示的內容進行相應的改變。
透過更進階的設置,也有可能讓片場的演員在LED牆上所看到的內容,與攝影機所拍攝的內容不同。這在現場直播(廣播)製作中非常有用,可為現場的演員提供額外的資訊,而不僅只是最終完成的輸出、和/或為不同的市場或觀眾所提供的不同輸出。
虛擬攝影棚(Virtual Studio - VS)
也被稱為“綠幕(Green Screen)”製作,VS是最常見的虛擬製作形式之一。在演員周圍使用綠色(有時是藍色)背景,這樣它就可以被“去除(Key)”掉,並以虛擬環境取而代之。
跟XR一樣,我們需要追蹤攝影機的位置及運動,以確保真實和虛擬元素的互動。在更高級的場景中,我們還可以追蹤演員,並將他們“映射(Map)”至虛擬世界中,以便他們能與虛擬環境互動。
有些人認為,XR的開發技術將是VS/綠幕的終結者,但綠幕技術相對的簡單且可及,就LED牆的成本及其複雜性而言,估計虛擬攝影棚將會與我們再相處上一段時間。
場景延伸(Set Extension)
場景延伸使用AR來延伸一個實體的場景或環境,這是一種讓作品即使是在相當有限的空間內製作,卻能具有大尺度規模感的偉大技術,並已被廣泛用於選秀節目形式,如:真人實境歌唱比賽電視連續劇“蒙面歌王(The Masked Singer)”等。
擴增實境(Augmented Reality – AR)
AR製作是將虛擬元素放置在真實世界的3D環境中。這方面一個著名的例子是2021S年美式足球賽,卡羅萊納黑豹隊的巨型虛擬黑豹在體育場內跳躍、並撕毀競爭對手的旗幟。(譯者註:堅達公司早在2019年WBSC世界12強棒球賽錦標賽的開戰賽:中日大戰,即已進行AR開場表演且為20國直播 - https://bit.ly/3v39waa)
這樣的製作是真實世界環境中創造虛擬代表物(Virtual Representation),儘管現場觀眾看不到。虛擬元素(如:黑豹)可與這個虛擬代表物互動,就像真實世界中一樣。同樣的,必須追蹤攝影機的運動和位置,確保虛擬和真實世界始終維持“一致(Aligned)”。
廣電圖形(Broadcast Graphics)
廣電圖形與AR之間的界線可能有點模糊。雖然我們在廣電中仍看到很多簡單的2D圖形疊加,而3D圖形及動態和資料驅動(Data-Driven)的內容已普遍存在一段時間。從視覺上區分廣播圖形和AR的一種方法是:AR元素傾向於與真實世界的場景互動,而廣電圖形僅純粹落於(Sit In)場景或疊加於場景上。
然而,兩者之間的主要區別在於製作元素的工作流程。廣電圖形通常基於樣版(Template)的資料驅動的內容,旨在為觀眾提供資訊以補充節目內容;而AR元素通常是創意元素,是為了讓觀眾參與至節目本身。除此之外,與上述其他類型的虛擬製作不同,廣電圖形並非一定需要攝影機追蹤。
混合實境(Mixed Reality – MR)
混合實境是上述任何及所有虛擬製作技術的混合。應該不難想像AR或廣電圖形元素如何被添加在LED牆/XR、或虛擬攝影棚中所創建的製作中;我們還看到虛擬攝影棚和XR技術結合的製作 - 例如:在LED牆周圍有綠幕地板及牆壁。
圍繞在虛擬製作(VP)的詞彙持續增加,雖然可能不是絕對,但VES和ASC在VP詞彙上的工作,對於任何希望加入虛擬製作討論的人來說,是一個值得的起點。除此之外,SMPTE的RIS計畫(Rapid Industry Solutions Program)也值得關注,該計畫圍繞現場虛擬製作創建了一些資源。
在本系列的下一篇文章中,我們將探討虛擬製作的一些主要組成元素與特點,及使用虛擬製作技術的一些好處。
Comments