在火星祝國社生日快樂的背后,游戲技術的跨界演武場
今年4月24日中國航天日,新華社正式對外發布“數字航天員”計劃,用計算機圖形和人工智能技術打造中國第一位數字記者和全球首位數字航天員“小諍”。騰訊互娛旗下NExT Studios作為技術戰略合作伙伴,為數字航天員的制作提供技術支持,助力完成此次主流價值觀虛擬偶像的塑造任務。
11月7日,恰逢新華社成立90周年,包括UE5 Nanite和Lumen的新特性、五面屏沉浸式展示、原創火星車、航天服、火星場景等內容的最新預告片同期發布,數字航天員在火星為國社慶祝生日快樂,也展示了背后技術團隊大型寫實場景的打造與渲染的能力。
之前我們提到,數字航天員這樣的合作其實代表了游戲技術可以單獨跨界創造多元化價值,而不拘泥于游戲產品本身。這種更下沉更底層的合作突破了以往的限制,為游戲多元化價值的探索帶來更多方向上的可能。
而這種合作成立的背后,也是源自當下各行各業與時俱進、對于數字技術運用的普遍的需求。對于新華社而言,選擇內容創新與技術創新、渠道創新融合發展,這是把握新媒體融合生產的精髓。“數字航天員”計劃中,游戲技術的運用是為航天科普最終更好的效果服務。而對于NExT Studios以及背后的游戲行業,跨界合作除了探索多元化價值的上層目標,也是游戲團隊對于技術的一次跨界演武試煉,獲得寶貴的經驗積累,為日后更多項目的打好基礎。
1
新華社的前身為紅色中華通訊社,1931年11月7日在江西瑞金成立,是中國共產黨領導下成立最早的新聞機構。1937年1月,為適應革命斗爭形勢的需要,根據中央的決定,在延安更名為新華通訊社。
成立90周年之際,正如其所言“90年后,國家通訊社正年輕,向著5G、人工智能、云計算、空間信息技術、先進計算機圖形技術構筑的新宇宙出發!”新媒體融合生產的精髓和要義在于,把控內容質量的同時,內容創新需要與技術創新、渠道創新融合發展,與時俱進。
因此我們也能看到,官媒們在各個新平臺和渠道積極開拓,引入更多技術探索更多表現形式,保持年輕活力、“接地氣”地走進用戶群體。在這其中,更多新技術和新形式的引入運用,本質上還是為傳播的效果服務。
正如本次“數字航天員”計劃,用計算機圖形和人工智能技術打造中國第一位數字記者和全球首位數字航天員“小諍”。2021年,中國航天除“天問一號”火星探測任務完成火星登陸外,也已轉入空間站在軌建設任務階段,迎來“天宮”空間站。數字航天員將出現在上述項目中,并在從太空到地面的多個虛實結合、全數字環境開展多樣化的運營嘗試。
作為國內首個多環境運營的超寫實數字人項目,成為連接中國航天精神和年輕一代人群的橋梁。
游戲技術跨界創造多元價值的前提是,合作雙方有著志同道合的訴求。對于媒體報道,將新興數字技術引入新聞生產,以更多表現形式有效拓展場景,實現技術、內容和創意的融合迭代, 為用戶提供更容易接受的表現形式,進而實現更好的傳播效果。
2
根據信息,新華社媒體融合生產技術與系統國家重點實驗室組織實施整個數字航天員項目。作為行業領先的技術和科研探索,項目要點主要包括:超寫實數字人形象的塑造;合成語音等數字人相關技術的集成;多場景數字人資產的運用;多模態人機交互體系的構建和知識圖譜的構建;超大規模可交互開放數字場景的建設。其中,前三項已在2021年全面展開并制作了數十分鐘媒體產品,最后兩項也已開展了前期工作。
作為騰訊游戲旗下最重要的研發部門,NExT Studios承擔了核心的超寫實數字航天員塑造工作,以及此次預告片所展示的超大數字場景建設。
值得注意的是,在此之前,我們關注的重點在于虛擬人技術上,無論是Project Siren、Matt AI還是人臉制作管線xFaceBuilder?和動畫生產管線xMoCap?的技術,都是圍繞高保真數字虛擬人領域展開,也是NExT Studios參與此次項目的關鍵。
作為國家通訊社,新華社面對中國社會生產生活的方方面面,是名副其實的社會超級連接者。而NExT Studios——其實也包括整個騰訊公司,也中國最強大的數字技術擁有者。
這種合作不僅是一個展示游戲技術前沿應用的良好契機,更是一個真正實現游戲技術向整個社會遷移和擴散的實踐。
例如最新預告片中提到,過去每生成一幀這樣的畫面,都要幾十個小時。但現在,實時渲染技術大幅度提升了制作的效率,而且云計算和人工智能允許大量的實時交互的可能。“小諍”實際演示了撿起地上的一塊石頭,打碎另外一堆石頭的場景。
這些演示豐富航天科普效果的同時,也讓用戶更加明確直觀了解到游戲技術對于整個社會生活的意義和想象。
根據團隊介紹,該項目開發中運用了UE5 Nanite和Lumen等引擎特性,并支持空間音頻(Spatial Audio)技術。
事實上,這一“新宇宙”演示,針對新華社“新立方”沉浸式體驗空間打造的、面向下一代互聯網平臺的探索嘗試。也就是人們稱之為3D互聯網或元宇宙的未來目標。
受制于相關硬件還沒有普及,因此剪輯成為普通視頻版本。目前,VR版本正在制作之中。
這一預告片有著耐人尋味的情節。當然,其核心在于超大規模寫實場景的打造與渲染能力的體現。通過UE5的Lumen和Nanite系統,可以加快游戲速度并減少優化模型(如 LOD、烘焙等)的時間。Nanite是一個虛擬化的幾何系統,可以在場景中具有高多邊形網格。而Lumen的主要特點是無需硬件光線追蹤支持,也可以支持實時的全動態GI,無需預先烘焙,對室內外場景均可以達到較好的細節質量與性能的平衡,且與Nanite可以無縫配合。
然后,正如片尾“打開新宇宙”的預告一樣,從虛擬人到超大規模寫實場景打造,NExT Studios其實都是在“超級數字場景”的原則指導下,推動未來用戶更加沉浸的進入虛擬數字場景。角色和場景都是不可或缺的部分,NExT Studios正在逐步向外展示這方面的能力。
在人類的歷史上,商業和戰爭是推動社會變革的兩大因素。如今,來自于數字文化的技術開始向社會集體滲透。它是否會成為第三種推動社會變革的決定性技術?這取決于這種技術是否能夠更廣泛的與社會生活的各方面實現有限連接和遷移。NExT Studios、騰訊公司通過與新華社的合作,給出了自己的模式。
本文來自微信公眾號“游戲價值論”(ID:gamewower),作者:李亞捷,36氪經授權發布。