虛幻引擎技術開放日,索尼和觀池帶來這些技術“干貨”

時間:2022/11/22 來源:專業視聽網

關鍵詞: 索尼、虛幻引擎技術


放眼未來的技術“盛宴”

2022年度虛幻引擎技術開放日(Unreal Open Day)于11月17日-18日首次以線上線下同步的形式舉行。游戲開發、影視制作的從業者對虛幻引擎(Unreal Engine)都不陌生,它是由知名游戲公司Epic Games打造的強大游戲開發平臺,并在今年上半年發布了UE5正式版。

隨著平臺完善和技術進步,虛幻引擎的應用場景已經不再局限于游戲制作,強大的Nanite與Lumen技術,不但為傳統游戲制作中實時渲染和全局動態光照帶來便利,也讓虛幻引擎拓展應用于更多領域。因此,兩天的開放日除了直播間主會場外,還帶來了媒體娛樂、汽車、建筑及仿真四個分會場。

虛幻引擎開放日也是行業難得的盛會,持續兩天的活動奉上了二十余場精彩技術演講,既有Epic Games官方的技術解讀,也有主流制作公司帶來的精彩案例分享,涵蓋了從UGC、元宇宙、電商購物,到汽車數字應用及當下熱門的虛擬影視制作,可謂是一場放眼未來、引領科技發展的技術“盛宴”。



揭開虛擬影棚神秘面紗

會上,索尼(中國)有限公司消費電子與專業系統本部市場總部總監茂利憲一、創新解決方案市場部高級經理尹旭暉,以及愚見觀池科技有限公司UE虛擬制片技術總監韓冰在演講中分享了大量技術干貨,從設備選擇、影棚搭建、技術調試到實際拍攝案例分享,多維度解讀了黑彩晶虛擬制片影棚和UE5結合的相關經驗,并揭開了索尼和觀池聯合打造的國內首個黑彩晶虛擬制作影棚的神秘面紗。

虛幻引擎在游戲領域很早就得以廣泛應用,因此二十余場演講中過半都著眼于游戲制作開發,在這樣的情況下,索尼和觀池奉上的黑彩晶虛擬制片影棚和UE5結合的實戰案例,成為這屆開放日上唯一一個針對虛擬影視制作的分享,應該也是虛幻引擎開放日舉辦以來,首次引入虛擬制作分享,有很重要的意義。

秉承“用創意和科技的力量感動世界”的企業宗旨,索尼多年來在視聽領域持續深耕,得益于深厚的技術積淀及產品研發經驗,索尼成為虛擬影視制作的先行者,并積極在虛擬制作領域布局,聯合觀池一起打造了國內首個黑彩晶虛擬制作影棚。

影棚位于上海城市中心愚園路靠近江蘇路,索尼提供了虛擬制作中三個核心產品,分別為拍攝端的索尼CineAltaV 2電影攝影機、監看端的索尼HDR監視器,以及顯示端索尼專門為虛擬拍攝開發的黑彩晶B系列LED屏。這三個核心產品從研發、生產到最終的質量控制,都著力于不同設備間的色彩調校,應用于虛擬制作系統中,在現場經過簡單設置就能完成一整套設備間的色彩匹配。

LED屏高度5.5米,弧長15米,總面積達到83平米,弧度約在135度,水平分辨率達到9.6K,可以滿足多種拍攝需求,影棚除了搭載先進的UE5系統外,還選用了OptiTrack光學動作捕捉跟蹤系統,通過24個高速攝像頭準確捕捉跟蹤攝影機運動,并同步給UE5,通過低延遲將渲染畫面實時顯示在LED屏上。

而且,索尼工程師全程參與影棚的設計,并提供了全流程服務。除了立屏和頂屏,這間影棚還精心設計了一塊移動LED屏幕,便于攝影師完成雙機拍攝,降低渲染壓力,補充不同機位的拍攝效果,而且還可以完成高質量的色彩補光、實時定位等工作。

聯合Epic Games發布技術白皮書

成功不是一蹴而就。索尼進入虛擬制作領域得益于多年的技術積累和產品研發經驗;虛幻引擎在這個領域的成功運用,同樣經過了大量測試和實踐應用,Epic Games的合作測試伙伴則首選了索尼。

演講中尹旭暉公開了這個重要信息,索尼和Epic Games針對虛擬應用進行了聯合測試,并發布技術白皮書。測試中涵蓋了決定虛擬制作品質的三個關鍵點,索尼設備都有很好表現。

首先是拍攝LED屏幕時,極易給攝影師帶來困擾的摩爾紋。摩爾紋是物理現象,理論上只能盡量減弱,無法完全消除,由于黑彩晶1.58mm小間距和Micro LED芯片的優異表現,在索尼CineAltaV電影攝影機的配合下,測試中在較窄范圍內摩爾紋才會出現,因此攝影師可以把焦點更加貼近LED屏幕拍攝,拓展了拍攝創作的空間。

其次是暗部畫面表現。暗部畫面非??简濴ED屏的實力水準,測試中對比來看,2.8mm LED的部分暗部細節會丟失,1.5mm LED光照很低的部分則會顏色失真,而黑彩晶LED屏在整個暗場畫面中都忠實表現出了原始素材的細節和質感。

第三點是可視角度。拍攝過程中攝影機不可能一直正對著LED屏幕進行拍攝,會根據場景需要調整機位和攝影機與LED屏的角度。側拍時LED屏幕產生的偏色會對拍攝工作帶來影響,讓畫面失真,因此虛擬拍攝對LED屏幕的側視角性能有很高要求。

為了應對這一點,索尼在研發上下了功夫,索尼開發了寬配光技術,并使用自身研發的表面涂層技術,使得LED在側視角時都有出色和一致的色彩表現。這項性能也體現在Epic Games的測試中,大角度拍攝時也不容易發生色彩偏移,可視角的水平垂直達到170度,為虛擬拍攝提供很大便利。

目前虛擬拍攝還處在起步階段,硬件良莠不齊、軟件亟待成熟,在這樣的現狀下,索尼和Epic Games完成這次測試,其意義已超越了測試本身,發布的技術白皮書有望成為行業標桿。

案例分享全是干貨

愚見觀池科技有限公司,是目前中國頭部的商業視頻制作公司之一,涵蓋了包括視頻內容制作及數字體驗多個領域,服務過眾多國際品牌。黑彩晶虛擬制作影棚試運營階段,就在索尼和UE虛擬制片團隊的協助下,共同進行了虛擬場景搭建優化以及測試,并隨之完成了TVC的正式拍攝。

觀池UE虛擬制片技術總監韓冰介紹了項目背景,并分享了制作經驗。演講過程中播放了某品牌礦泉水的廣告成片,畫面呈現出了不輸于電影級別的質感,以及明媚日光、窗外就是沙灘的優美風景,得益于索尼黑彩晶LED屏的出色表現,讓人感覺不到是在虛擬影棚中拍攝。

這個精彩案例有力證明了虛擬制作能為廣告拍攝賦能。韓冰介紹說,商業TVC往往時間緊迫,通常,導演團隊及美術部門完成風格定調后,第一時間開始了預演的制作以及場景內容制作,同時在相應場景布局完成后確定了鏡頭以及場景道具的具體布置。

準備就緒后,2周后就可以試拍,得益于虛擬拍攝的高效和靈活性,拍攝團隊在次日僅用一天的時間,即可以完成約40個鏡頭的拍攝。由此可見,虛擬拍攝不但可以減輕外聯選景、道具部門置景的成本和壓力,同時將后期工作前置,有效縮短拍攝流程,未來在影視制作領域也大有作為。

同時韓冰也分享了兩點很有價值的制作經驗。

首先是拍攝前要做好充足的準備和各部門的充分溝通,應該讓制片團隊盡早了解導演的想法以及預期,甚至參與部分創意內容。盡早完成預演及技術驗證,將內容和技術風險解決在預打燈前,而充分溝通和交流則可以讓任何調整及問題,在第一時間得到相應解決。

其次是拍攝過程中的色彩一致性。虛擬拍攝的色彩一致性往往會給拍攝團隊帶來困擾,從拍攝端到顯示端,往往制作過程中的每一個環節色彩顯示都不相同,甚至會大相徑庭。這個問題不僅來自于不同顯示設備廠商色彩空間的一致性上的差異,還包括無法解決的物理燈珠或液晶發色的問題。

觀池在拍攝部分沒有采用BT.2020色域,而是使用了索尼CineAltaV 2電影攝影機支持的更寬的色彩空間S.Gamut3,亮度曲線使用了索尼常用的slog3。監視器部分則與攝影機的輸出保持一致,得益于索尼CineAltaV2電影攝影機、HDR監視器和索尼黑彩晶LED屏具備統一的色彩科學,這次拍攝色彩表現實現了一致性。

韓冰還介紹,業界也有可以解決色彩一致性的方案,但使用該方案要支付高達百萬美金的費用,以及差不多2個月的校色時間,且僅能對應一系列設備,目前很難投入到實際應用。由此可見,搭載索尼核心設備的虛擬影棚,不但讓虛擬拍攝更高效,還能有效節約制作和調試費用。

除了聯合觀池在國內打造了首個黑彩晶虛擬制作影棚外,索尼秉承“讓科技賦能創作者”的使命和愿景,已經在全球范圍內開啟了虛擬制作影棚布局。目前日本東京的PCL清澄白河BASE黑彩晶虛擬制作影棚和美國SIS索尼創新工作室的虛擬制作影棚都已投入使用,并為廣告、舞臺表演、現場音樂等內容提供服務,還完成拍攝了電影短片《凱利安的游戲》。

而在此次開放日的分享中,茂利憲一也表示索尼會將創作者的需求不斷反饋到產品開發設計部門,力求打造出更出色、能夠滿足創作者需求的黑彩晶虛擬制作系統,并希望索尼和觀池打造的黑彩晶虛擬制作影棚,能作為新時代攝影棚的標桿,助力創作者,為國內虛擬制作領域賦能、為行業做出更大貢獻。



索尼集團公司介紹:

索尼集團公司是一家建立在堅實技術基礎上的創意娛樂公司,現運營六大業務板塊:游戲與網絡服務業務;音樂業務;影視業務;娛樂、技術及服務業務;影像與傳感解決方案業務;金融服務業務。索尼的企業宗旨是“用創意和科技的力量感動世界”。公司在截止到2022331日結束的2021財年,合并銷售額達883億美元。

索尼全球網址:http://www.sony.net

索尼中國網址:http://www.sony.com.cn

全國免費垂詢電話:400-810-9000,400-810-2208

熱門技術探討更多>>

同類產品或技術文章列表更多>>