您當前的位置:首頁 > 攝影

難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人

作者:由 新智元 發表于 攝影時間:2022-12-03

編輯:桃子 好睏

【新智元導讀】

每日經濟新聞直播70天,沒人發現主播是數字孿生虛擬人?全球首個做到和真人本尊真假莫辨的數字孿生人N小黑和N小白來了。新的數字革命演進,正越來越觸手可及。

「目前,公司正在配合開展相關前期工作,承諾事項的履行尚在進行中……。」

12月17日,「每日經濟新聞」的主播N小黑正口若懸河地播報當日資訊,大家捧著手機興致勃勃地看著,沒人發現——這個主播是「假」的。

難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人

他是全球首個做到和真人原型真假莫辨的數字孿生人N小黑。

而且,不止N小黑一個人是虛擬的,他還有個數字孿生人搭檔:N小白。

更令人詫異的是,其實這兩人已經合作連續直播新聞70天,但幾乎沒有粉絲和使用者看出來。

大概是因為他們的面容、表情、肢體動作等,都太真實和自然了。

只是有不少人偶爾也疑惑:「這倆主播也太敬業了,天天都上班?」

首批真假難辨的數字孿生主播來了

直到12月20日,答案才正式揭曉。

N小黑播完財經資訊後,自己公佈了真相:

「大家好,我是每日經濟新聞的人工智慧主播,我不是本人,而是他的數字孿生。我已經悄悄上線,不間斷運行了70天。許多人以為,這是由人類主播提前錄製好的影片,其實並不是。所有你看到的,包括我講述的文字,都由人工智慧小冰框架生成和驅動。」

難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人

https://www。zhihu。com/video/1456280107744239616

此時,他依然吐詞清晰自然,還加著手勢和微表情,和他真人在抖音號“N小黑財經”的狀態別無二致。

他們背後的「製造者」小冰公司,也正式宣佈:基於小冰深度神經網路渲染(X Neural Rendering)的全新數字孿生虛擬人來了。

這是他們首次將人工智慧虛擬人類的整體自然度,提升到和真實人類幾乎無法分辨的程度。

小冰和每日經濟新聞聯合打造的數字孿生主播N小黑和N小白,也在當日與「每經AI電視」一同全網上線。

值得一提的是,小冰公司還首次實現了影片採編播全流程的無人化操作。

基於此進步,「每經AI電視」也成為了全球首個7x24小時不間斷播出的AI影片直播產品。

不過網友們也是見多識廣,質疑自然也不會少。

比如,AI主播已經見怪不怪了,新華社、央視都做過,這兩個新的「虛擬主播」又有什麼特別之處?

新的技術,到底帶來了哪些進步?又是如何做到的?對我們未來有什麼改變?

接下來,我們進一步來說說。

數字孿生主播,帶來什麼新技術?

先簡單說一下,這兩個「虛擬主播」誕生的過程。

首先,兩位虛擬主播的訓練資料,是來自知名財經主播N小黑(N小黑財經)和N小白(每經小白基金)。

接著,再結合小冰深度神經網路渲染技術(Xiaoice Neural Rendering, XNR),使得包括面容、表情、肢體動作等在內的整體自然度,可以大幅度提升。

最後,透過小冰框架小樣本學習技術,只需要一週的訓練週期,這兩個數字孿生人,就誕生了。

聽起來很輕鬆?

事實上,單從訓練週期來說, 過去虛擬人的訓練週期就要數月,這也造成了虛擬人週期長、成本高的難題。但虛擬人再次成為全球熱點後,這個問題總得有人去解決。

學術界和工業界早已開始行動。今年11月的《中國計算機學會通訊》封面專題就是“計算機圖形學與人工智慧融合”,用6篇專業文章討論了CG和AI從技術到應用的廣泛融合,並希望將計算機視覺、自然語言處理、計算機語音和深度學習方法引入到CG,希望將人力驅動轉變為資料驅動,將手動演算法升級為基於資料分析的自動演算法,整體提升系統易用性和效率。

難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人

具體到數字孿生人N小黑和N小白,就意味著一個困擾娛樂和媒體產業的長期問題——也就是「如何高效逼真地渲染虛擬人」——或許有了新解法。不怕暴露年紀的網友,應該都還記得16年前的《最終幻想7:聖子降臨》的勇敢嘗試,以及驚呼《阿凡達》的逆天細節——這都是十多年前的事情了,那時影視工業製作虛擬人的時間週期和成本是以年和百萬美元(還只是主角的頭髮渲染)為單位的。

難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人

為何小冰能以深度神經網路渲染技術(XNR)與CG融合後解決這一問題?一方面,相較於傳統CG,這項技術可以充分利用深度學習,從大量資料中提取資料先驗,實現傳統渲染流程中,某些模組的加速和輕量化。

簡單來說,就是渲得更快。

另一方面,基於深度學習的三維場景表達和對應的神經渲染管線,可以在特定場景中發揮作用,讓虛擬人的視覺形象、表情、肢體動作更加逼真。

簡單來說,就是渲得更好。

解決了這個問題,這項技術就能創造極大的商業價值。

不過只用CG和AI融合造人還是不夠的,虛擬人如何呈現,呈現什麼內容,對普羅大眾來說,才是最重要的。

而 N小黑、N小白和其它虛擬主播最大的不同也在於——

他們不僅形象是AI建模生成的,從金融資訊的文字生成,到透過預訓練的虛擬主播實現音畫同步播報,再結合同步場景動態繪製,最終生成完整的直播推流,全部都是由 AI 完成,不需要任何人來參與。

這也在全球範圍內,首次真正實現了自動化的AI採編播全流程。

對此,在小冰公司CEO李笛看來,「一個永不疲倦、安全可靠、穩定輸出的AI Being時代已經到來。」

N小黑和N小白,預示著怎樣的未來?

現在,我們已經對虛擬人越來越不陌生了。

他們背後虛擬數字技術的程序,是飛快的。

在形象擬人度上,前有洛天依、泠鳶掀起了二次元虛擬人的熱潮,現在翎_Ling、Ayayi、阿喜這些超寫實虛擬偶像也越來越火,再往後看,數字孿生的未來也離我們越來越近了。

從黃仁勳在英偉達釋出會上「騙」過眾人,到小冰最新的N小黑N小白,都看得出,各類虛擬人在追求「真實自然之路」上越走越廣了。

在真實自然之路上,還有更大的攔路虎,比如虛擬人的內容、互動、多樣性等。

傳統上,行業通常以CG 和動捕的組合來打造虛擬人,完全依賴人力,週期長、成本高且不說,關鍵是沒內容、沒互動、人設固定。

從這一點上來看,N小黑和N小白正透過小冰的人工智慧技術,打造出了CG和人工智慧融合後的框架全能力圖景。

比如,從內容和互動方式上來看,傳統的虛擬人要不就是隻有平面硬照(換臉),或者文字(人工運營),加上中之人之後,才會說話、唱歌、互動。

而已經能在視覺、聲音、文字上都自由表達的數字孿生N小黑和N小白,也預示著虛擬人的互動即將實現多模態——還記得兩年前帶著大家逛日本水族館的Rinna吧?

難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人

https://www。zhihu。com/video/1456279956855123968

可以說,N小黑和N小白這兩個數字孿生人的出現,有望開啟虛擬人在各個場景普及的新未來。小冰團隊也說,近期即將推出更多的虛擬人,從官宣物料看,作品正在迪拜世博會中國館參展的夏語冰,也即將營業?

難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人

標簽: 虛擬人  主播  小黑  小冰  孿生