日期：2022年3月18日
作者：Ben Davenport，Pixotope
Pixotope的Ben Davenport為NewscastStudio撰寫一系列專欄，這是他的第一篇，Ben分析了虛擬製作（Virtual Production - VP）的一些術語。
虛擬製作正成為一個熱門的詞彙，有一部分是受到COVID-19疫情的推動，正在建設的虛擬製作設施的數量、使用虛擬製作技術的製作數量，都顯著的增長，但它究竟是什麼？
專業術語“虛擬製作”包括用於創造沉浸式（Immersive）體驗的工具、方法及服務，將即時虛擬內容與現場視訊（Live Video）相結合。
這裡的關鍵因素是“即時（Real-Time）”- 在非即時的後期製作中，我們以VFX的形式在視訊中添加虛擬內容已經有很長一段時間了。在遊戲技術發展的推動下，現在比以往的任何時候都更容易獲得引擎和工具組，能將高品質、如照片般逼真的元素即時結合至現場視訊中。
圍繞於虛擬製作的詞彙，跟任何快速發展的技術一樣，也有許多不同的解釋與定義。事實上，即使是“虛擬製作（Virtual Production）”一詞，本身也經常與“視覺化製作（Virtualized Production）”、甚至“遠端製作（Remote Production）”等相混淆 - 兩者都與虛擬製作有關，但卻是截然不同的主題。
也許，要開始瞭解專業術語的最簡單方法就是：先看看目前所使用的虛擬製作的主要類型。
延展實境（Extended Reality – XR）
在談到虛擬製作時，XR將會佔據較大的篇幅，但它也是最令人感到困惑的術語之一。在視覺特效協會（Visual Effects Society - VES）及美國電影攝影師協會（American Society of Cinematographers - ASC）所創建的VP詞彙表（VP Glossary）中，將XR定義為“虛擬實境（Virtual Reality - VR）、擴增實境（Augmented Reality - AR）、混合實境（Mixed Reality - MR）的總稱，及此類技術所可能帶來的所有未來實境”。這是一個非常廣泛的定義，但事實上同一詞彙表，將XR視為等同於虛擬製作。
然而，最常見的是XR一詞被用來描述使用大型LED牆，創造真人可互動的虛擬環境。
VES/ASC VP詞彙表使用“ICVFX - In Camera Visual Effects（攝影機內視覺特效）”一詞來描述此類的製作。這個術語可能有點誤導，因為效果本身實際上並不在攝影機中。但作為一個術語，它確實強調了一個事實：攝影機的位置及運動，和LED牆上顯示的內容之間存在著一種關係。如果你思考一下，在房間裡的攝影機拍窗外，攝影機視野內能看到的窗外景象，取決於攝影機在房間裡的位置。對於XR或ICVFX來說亦是如此 - 合成虛擬環境的引擎接收到攝影機位置的資料，讓LED牆上顯示的內容進行相應的改變。
透過更進階的設置，也有可能讓片場的演員在LED牆上所看到的內容，與攝影機所拍攝的內容不同。這在現場直播（廣播）製作中非常有用，可為現場的演員提供額外的資訊，而不僅只是最終完成的輸出、和/或為不同的市場或觀眾所提供的不同輸出。
虛擬攝影棚（Virtual Studio - VS）
也被稱為“綠幕（Green Screen）”製作，VS是最常見的虛擬製作形式之一。在演員周圍使用綠色（有時是藍色）背景，這樣它就可以被“去除（Key）”掉，並以虛擬環境取而代之。
跟XR一樣，我們需要追蹤攝影機的位置及運動，以確保真實和虛擬元素的互動。在更高級的場景中，我們還可以追蹤演員，並將他們“映射（Map）”至虛擬世界中，以便他們能與虛擬環境互動。
有些人認為，XR的開發技術將是VS/綠幕的終結者，但綠幕技術相對的簡單且可及，就LED牆的成本及其複雜性而言，估計虛擬攝影棚將會與我們再相處上一段時間。
場景延伸（Set Extension）
場景延伸使用AR來延伸一個實體的場景或環境，這是一種讓作品即使是在相當有限的空間內製作，卻能具有大尺度規模感的偉大技術，並已被廣泛用於選秀節目形式，如：真人實境歌唱比賽電視連續劇“蒙面歌王（The Masked Singer）”等。
擴增實境（Augmented Reality – AR）
AR製作是將虛擬元素放置在真實世界的3D環境中。這方面一個著名的例子是2021S年美式足球賽，卡羅萊納黑豹隊的巨型虛擬黑豹在體育場內跳躍、並撕毀競爭對手的旗幟。（譯者註：堅達公司早在2019年WBSC世界12強棒球賽錦標賽的開戰賽：中日大戰，即已進行AR開場表演且為20國直播 - https://bit.ly/3v39waa）
這樣的製作是真實世界環境中創造虛擬代表物（Virtual Representation），儘管現場觀眾看不到。虛擬元素（如：黑豹）可與這個虛擬代表物互動，就像真實世界中一樣。同樣的，必須追蹤攝影機的運動和位置，確保虛擬和真實世界始終維持“一致（Aligned）”。
廣電圖形（Broadcast Graphics）
廣電圖形與AR之間的界線可能有點模糊。雖然我們在廣電中仍看到很多簡單的2D圖形疊加，而3D圖形及動態和資料驅動（Data-Driven）的內容已普遍存在一段時間。從視覺上區分廣播圖形和AR的一種方法是：AR元素傾向於與真實世界的場景互動，而廣電圖形僅純粹落於（Sit In）場景或疊加於場景上。
然而，兩者之間的主要區別在於製作元素的工作流程。廣電圖形通常基於樣版（Template）的資料驅動的內容，旨在為觀眾提供資訊以補充節目內容；而AR元素通常是創意元素，是為了讓觀眾參與至節目本身。除此之外，與上述其他類型的虛擬製作不同，廣電圖形並非一定需要攝影機追蹤。
混合實境（Mixed Reality – MR）
混合實境是上述任何及所有虛擬製作技術的混合。應該不難想像AR或廣電圖形元素如何被添加在LED牆/XR、或虛擬攝影棚中所創建的製作中；我們還看到虛擬攝影棚和XR技術結合的製作 - 例如：在LED牆周圍有綠幕地板及牆壁。
圍繞在虛擬製作（VP）的詞彙持續增加，雖然可能不是絕對，但VES和ASC在VP詞彙上的工作，對於任何希望加入虛擬製作討論的人來說，是一個值得的起點。除此之外，SMPTE的RIS計畫（Rapid Industry Solutions Program）也值得關注，該計畫圍繞現場虛擬製作創建了一些資源。
在本系列的下一篇文章中，我們將探討虛擬製作的一些主要組成元素與特點，及使用虛擬製作技術的一些好處。
留言