難以置信!小冰數字孿生虛擬人直播70天,沒人發現不是真人
編輯:桃子 好睏
【新智元導讀】
每日經濟新聞直播70天,沒人發現主播是數字孿生虛擬人?全球首個做到和真人本尊真假莫辨的數字孿生人N小黑和N小白來了。新的數字革命演進,正越來越觸手可及。
「目前,公司正在配合開展相關前期工作,承諾事項的履行尚在進行中……。」
12月17日,「每日經濟新聞」的主播N小黑正口若懸河地播報當日資訊,大家捧著手機興致勃勃地看著,沒人發現——這個主播是「假」的。
他是全球首個做到和真人原型真假莫辨的數字孿生人N小黑。
而且,不止N小黑一個人是虛擬的,他還有個數字孿生人搭檔:N小白。
更令人詫異的是,其實這兩人已經合作連續直播新聞70天,但幾乎沒有粉絲和使用者看出來。
大概是因為他們的面容、表情、肢體動作等,都太真實和自然了。
只是有不少人偶爾也疑惑:「這倆主播也太敬業了,天天都上班?」
首批真假難辨的數字孿生主播來了
直到12月20日,答案才正式揭曉。
N小黑播完財經資訊後,自己公佈了真相:
「大家好,我是每日經濟新聞的人工智慧主播,我不是本人,而是他的數字孿生。我已經悄悄上線,不間斷運行了70天。許多人以為,這是由人類主播提前錄製好的影片,其實並不是。所有你看到的,包括我講述的文字,都由人工智慧小冰框架生成和驅動。」
https://www。zhihu。com/video/1456280107744239616
此時,他依然吐詞清晰自然,還加著手勢和微表情,和他真人在抖音號“N小黑財經”的狀態別無二致。
他們背後的「製造者」小冰公司,也正式宣佈:基於小冰深度神經網路渲染(X Neural Rendering)的全新數字孿生虛擬人來了。
這是他們首次將人工智慧虛擬人類的整體自然度,提升到和真實人類幾乎無法分辨的程度。
小冰和每日經濟新聞聯合打造的數字孿生主播N小黑和N小白,也在當日與「每經AI電視」一同全網上線。
值得一提的是,小冰公司還首次實現了影片採編播全流程的無人化操作。
基於此進步,「每經AI電視」也成為了全球首個7x24小時不間斷播出的AI影片直播產品。
不過網友們也是見多識廣,質疑自然也不會少。
比如,AI主播已經見怪不怪了,新華社、央視都做過,這兩個新的「虛擬主播」又有什麼特別之處?
新的技術,到底帶來了哪些進步?又是如何做到的?對我們未來有什麼改變?
接下來,我們進一步來說說。
數字孿生主播,帶來什麼新技術?
先簡單說一下,這兩個「虛擬主播」誕生的過程。
首先,兩位虛擬主播的訓練資料,是來自知名財經主播N小黑(N小黑財經)和N小白(每經小白基金)。
接著,再結合小冰深度神經網路渲染技術(Xiaoice Neural Rendering, XNR),使得包括面容、表情、肢體動作等在內的整體自然度,可以大幅度提升。
最後,透過小冰框架小樣本學習技術,只需要一週的訓練週期,這兩個數字孿生人,就誕生了。
聽起來很輕鬆?
事實上,單從訓練週期來說, 過去虛擬人的訓練週期就要數月,這也造成了虛擬人週期長、成本高的難題。但虛擬人再次成為全球熱點後,這個問題總得有人去解決。
學術界和工業界早已開始行動。今年11月的《中國計算機學會通訊》封面專題就是“計算機圖形學與人工智慧融合”,用6篇專業文章討論了CG和AI從技術到應用的廣泛融合,並希望將計算機視覺、自然語言處理、計算機語音和深度學習方法引入到CG,希望將人力驅動轉變為資料驅動,將手動演算法升級為基於資料分析的自動演算法,整體提升系統易用性和效率。
具體到數字孿生人N小黑和N小白,就意味著一個困擾娛樂和媒體產業的長期問題——也就是「如何高效逼真地渲染虛擬人」——或許有了新解法。不怕暴露年紀的網友,應該都還記得16年前的《最終幻想7:聖子降臨》的勇敢嘗試,以及驚呼《阿凡達》的逆天細節——這都是十多年前的事情了,那時影視工業製作虛擬人的時間週期和成本是以年和百萬美元(還只是主角的頭髮渲染)為單位的。
為何小冰能以深度神經網路渲染技術(XNR)與CG融合後解決這一問題?一方面,相較於傳統CG,這項技術可以充分利用深度學習,從大量資料中提取資料先驗,實現傳統渲染流程中,某些模組的加速和輕量化。
簡單來說,就是渲得更快。
另一方面,基於深度學習的三維場景表達和對應的神經渲染管線,可以在特定場景中發揮作用,讓虛擬人的視覺形象、表情、肢體動作更加逼真。
簡單來說,就是渲得更好。
解決了這個問題,這項技術就能創造極大的商業價值。
不過只用CG和AI融合造人還是不夠的,虛擬人如何呈現,呈現什麼內容,對普羅大眾來說,才是最重要的。
而 N小黑、N小白和其它虛擬主播最大的不同也在於——
他們不僅形象是AI建模生成的,從金融資訊的文字生成,到透過預訓練的虛擬主播實現音畫同步播報,再結合同步場景動態繪製,最終生成完整的直播推流,全部都是由 AI 完成,不需要任何人來參與。
這也在全球範圍內,首次真正實現了自動化的AI採編播全流程。
對此,在小冰公司CEO李笛看來,「一個永不疲倦、安全可靠、穩定輸出的AI Being時代已經到來。」
N小黑和N小白,預示著怎樣的未來?
現在,我們已經對虛擬人越來越不陌生了。
他們背後虛擬數字技術的程序,是飛快的。
在形象擬人度上,前有洛天依、泠鳶掀起了二次元虛擬人的熱潮,現在翎_Ling、Ayayi、阿喜這些超寫實虛擬偶像也越來越火,再往後看,數字孿生的未來也離我們越來越近了。
從黃仁勳在英偉達釋出會上「騙」過眾人,到小冰最新的N小黑N小白,都看得出,各類虛擬人在追求「真實自然之路」上越走越廣了。
在真實自然之路上,還有更大的攔路虎,比如虛擬人的內容、互動、多樣性等。
傳統上,行業通常以CG 和動捕的組合來打造虛擬人,完全依賴人力,週期長、成本高且不說,關鍵是沒內容、沒互動、人設固定。
從這一點上來看,N小黑和N小白正透過小冰的人工智慧技術,打造出了CG和人工智慧融合後的框架全能力圖景。
比如,從內容和互動方式上來看,傳統的虛擬人要不就是隻有平面硬照(換臉),或者文字(人工運營),加上中之人之後,才會說話、唱歌、互動。
而已經能在視覺、聲音、文字上都自由表達的數字孿生N小黑和N小白,也預示著虛擬人的互動即將實現多模態——還記得兩年前帶著大家逛日本水族館的Rinna吧?
https://www。zhihu。com/video/1456279956855123968
可以說,N小黑和N小白這兩個數字孿生人的出現,有望開啟虛擬人在各個場景普及的新未來。小冰團隊也說,近期即將推出更多的虛擬人,從官宣物料看,作品正在迪拜世博會中國館參展的夏語冰,也即將營業?