面臨的挑戰
Pixotope與That's It Media製作公司合作,為實驗性虛擬人物才藝大賽“2060”的第一季尋找可能性。這將是一個由10個部分組成的系列節目,在大陸江蘇衛視播出,它是大陸第三大電視網。
That's It Media和“2060”的製作人希望利用虛擬製作技術,創作出18至35歲目標觀眾群從未見過的東西。他們想誘發大陸觀眾的胃口,讓他們瞭解未來的虛擬才藝競賽的概念。
背景介紹
在“2060”系列賽中,有30個團隊設計、製作模型及製作3D表演者的動畫,這些表演者是用動態捕捉(Motion Capture)技術製作的人物。他們在綠幕(Green Screen)攝影棚舞台上進行現場比賽。攝影棚的評審與混合了現場及虛擬的觀眾,一起觀看虛擬明星的表演,並可透過兩個螢幕與他們在舞台上互動。
表演在現場AR及五個地標性虛擬場景之間無縫的轉場(Transition),這些場景統稱為“星環城(Star Ring City)”。為了最大限度的提高觀眾的視覺體驗,在整個系列中,每一集的複雜度與野心都持續的增加。隨著圍繞劇中人物的世界和環境的演變,技術團隊實現了令人驚歎的視覺效果。
Pixotope 的解決方案
Pixotope編寫了一個量身打造的高性能虛擬群眾產生系統(Virtual Crowd Generation System),用於即時的將虛擬觀眾與現場觀眾相混。該系統為節目製作人提供了一個可客製的框架,隨機的拉入觀眾,確保虛擬觀眾能有最佳的靈活性及效能。它在算圖(Rendering)方面,系統的負擔並不重,能讓成千上萬的虛擬觀眾同時即時運作。
現場即時工作流程
透過與That's It Media的密切合作,Pixotope在開拍前設計了一個特別訂製的虛擬製作工作流程。然後,Pixotope與製作團隊在上海及南京的現場全面合作,分享知識和經驗,同時協助進化工作流程。
Pixotope為該團隊設計、並進行了現場採集的工作流程,記錄了10台棚內攝影機的追蹤資料(Tracking Data),並為該製作建立了一個基於時碼的客製追蹤鎖定(Timecode-Based Tracking Lock),進而進行第二個算圖工作流程,這讓從現場錄影到完全運作的後期製作工作流程能無縫的過渡。如此一來,如果其中一個動態捕捉程式出現問題、或需調整其他任何內容時,它可重新創建並作為實況重新運行。
與此適應力強的工作流程相結合的是去背(Keying)、自動追蹤標記(Automatic Tracking Labeling)、即時追蹤匹配(Live Tracking Match),及使用Pixotope合成工具組中額外工具進行的高階合成,所有這些都易於簡化及獲取,幫助製作團隊便利的進行製作。
“2060”在視覺上令人驚歎。考慮到該節目的焦點在於詳細的動畫人物,該製作需以一般現場即時製作無法達到的品質,進行虛擬偶像的算圖。為了增強算圖過程,Pixotope整合了NVIDIA的深度學習(Deep Learning)技術,使節目中的動畫明星能以電影般的品質,展現在攝影棚及家裡的觀眾眼前。
大成功
That's It Media與技術合作夥伴Pixotope緊密合作,並充分利用其功能豐富的即時引擎,“2060”展現了在電視進行電影品質虛擬選秀節目的潛力。第一集播出後,節目中的V-Life人物立刻吸引了觀眾的注意,在大陸社群媒體上引發潮流及討論。第二季計畫將於2022年推出。
Pixotope充分利用了虛幻引擎(UE - Unreal Engine)的威力,實現了一種全新的綜藝表演,它為剛接觸虛擬製作的團隊,提供了一個簡單的使用者介面及特製的模組,以便利用虛幻引擎的威力。除此之外,同時還為這些團隊全程提供教育訓練及技術支援。
“我們想要有一個穩定的平台,同時能讓我們在最後一刻還進行即時的修改,Pixotope讓我們能做到這一切。除此之外,Pixotope團隊非常支持我們,我們有一個非常好的經驗。”
- That’s It Media 執行長 Gong Yizhao
“透過與Space Warp Engine工作室的緊密合作,我們能在Pixotope中開發、並提供基本的工作流程變化,以協助他們實現他們的願景。在整個過程中,隨著需求的改變,我們能提供相對的建議及回應。最後的結果是具突破性的、視覺效果上令人驚歎。Space Warp Engine工作室的創造力及足智多謀,是出類拔萃的,能與這部作品合作,我們感到很自豪。”
- Pixotope 亞太地區業務副總 Andrew Tan
Comments