作者:Pixotope China Pixotope
日期:2022年12月19日
SNC 2022 影之詩 線下決賽的虛擬製作
此次製作的核心效果是在虛擬AR場景中鏤空的範圍內,顯示現場攝影機的拍攝畫面,包括舞台,選手,獎盃和主持人等。現場部署了3台Pixotope虛擬引擎及2台Pixotope Tracking(Trackmen)攝影機追蹤。下面我們實際介紹一下本次製作的各個環節。
Pixotope ARHoldout
圖中用藍色線條標出的範圍為攝影機的實拍畫面,周圍被AR虛擬場景所包裹。
在Pixotope中可將場景中的物體轉換成AR Holdout,這個物體所在範圍將會被鏤空顯示出攝影機的實際拍攝畫面,這是在Pixotope XR中的一個重要功能,也可應用於AR虛擬的製作。
將製作場景中對應的部分轉換為AR holdout之後,就完成了在虛擬場景中鏤空的效果。下一步是將真實攝影機的運動與虛擬攝影機實現精確對應,即可呈現出影片中的效果。
攝影機追蹤
上圖為在搖臂(Crane)上的攝影機,下方藍色框中的設備為Pixotope Tracking的感測器,用來測量搖臂上攝影機的目前位置與角度,並同時輸送攝影機鏡頭的目前資料至Pixotope引擎。
由於本次LGD的場館整體為黑色,沒有明確的特徵點(Feature Point)可供追蹤設備使用。因此現場採用了佈置標記(Marker)的方式,使用紅外線追蹤的形式完成測量。Pixotope Tracking也具備無標記(Markerless)追蹤功能,關於標記及無標記相關資訊,可延伸閱讀此篇文章:https://reurl.cc/eWaKxL。
下面附上一些追蹤調試中的圖片作為參考。
總結一下系統的整體結構:透過安裝在攝影機上的追蹤感測器,識別貼在地面上的標記並進行計算,得到攝影機目前的狀態;透過網路通訊協定,將追蹤資料整體傳送至Pixotope引擎,Pixotope使用該資料將真實攝影機和虛擬攝影機完成匹配後,將畫面進行融合而得到最終畫面的輸出。現場的3路Pixotope畫面即時傳輸給導播機,由導播根據需要進行切換。在開幕式錄影中可看到各個機位的對應效果。
虛擬播放控制
本次虛擬製作包含了如下幾個環節:
開幕式選手亮相
職業 ban/pick
選手採訪
這裡簡單介紹一下ban/pick和採訪的部分,開幕式部分雖然也涉及虛擬播放控制,但相對比較簡單,主要是控制選手登場的效果和龍出現的時間。
圖中為虛擬播控的工作位置,左側螢幕中顯示的是Pixotope Control Panel,是可自由定義控制按鈕等各種功能的模組。有興趣的可以參照下面的影片,瞭解一下控制台:https://reurl.cc/GXD2ed
右側螢幕中為目前的ban/pick狀態,類似下圖。
場上選手完成ban/pick之後的資訊,會第一時間傳遞給虛擬播控工作人員,根據ban/pick的結果對應操作控制台,即時顯示至虛擬場景中。Pixotope控制台會自動與所有網路中的引擎進行連動。現場只需一個控制台,當有事件觸發時,會在所有機器上同時觸發。這次的播控有不少功能,下面是一些其他功能的效果展示。
選手遠端採訪
本次線下8強,有3名無法來現場的參賽選手,包括最後的優勝者也是其中之一。為了讓觀眾也能感受到他們在場的氣氛,網易為他們製作了虛擬傳送門。
上圖獎盃右側的傳送門中,顯示了優勝者的即時畫面,在最後場景顯示CHAMPION字樣時與主持人進行互動採訪。
在有限的篇幅內,只能約略描述節目的製作過程和涉及技術的整體概念,如需瞭解更多細節,歡迎直接與Pixotope授權經銷商 堅達公司 聯絡。
下面是影之詩Bilibili空間,可看到這次的完整賽事錄影:https://reurl.cc/AyDvXK
⭕更多虛擬製作作品集請參考➡ https://www.getop.com/virtual-production-ar
堅達公司(GETOP)為 Pixotope 正式授權代理,提供虛擬製作整廠技術顧問,系統整合及軟體訂閱等各種服務,歡迎來電預約參觀虛擬製作攝影棚及Pixotope軟體展示,TEL:02-7720-9899。
Comments