NEON人工智人在CES 2020
【鈦媒體作為CES2020 全球官方合作媒體,舉辦了首個中國媒體 Stage 舞臺 Talk to China Stage,訂閱「鈦媒體直擊2020 CES 」專題報道,查看現場精彩報道?!?/strong>
科技公司從未停止“造人”的腳步。
正在火熱進行的2020 CES 國際消費電子展上,三星首次對外展示了其“人工智人”產品 NEON,由三星旗下創(chuàng)新實驗室 STAR Labs 獨立開發(fā)。
STAR Labs官方介紹稱,NEON是一種由人工智能(AI)所驅動的虛擬存在,擁有和真人一致的音容、笑貌和言談舉止,擁有表達情感和智慧的能力。![]()
STAR Labs總裁兼CEO:普拉納夫•米思特里(Pranav Mistry)
NEON的發(fā)明人,就是三星 STAR Labs 現任首席執(zhí)行官普拉納夫·米斯特里(Pranav Mistry,以“P博士”的稱號著稱人工智能學界)。
“NEON就像是一個全新的物種”,P博士在展臺對全球介紹 NEON 時說,“地球上現存有幾百萬種生物,我們希望NEON可以成為其中新的一員”。
鈦媒體作為今年 CES 的官方媒體合作伙伴在現場對發(fā)回了一線報道(鈦媒體App獨家視頻),鈦媒體編輯也親自體驗了 NEON 的交互功能。

NEON“人工智人”在 2020 CES現場的展示,鈦媒體編輯曹天鵬拍攝
按照STAR Lab及其發(fā)明人的設想,NEON可以成為人類的朋友、合作者以及同伴,并且“會在與人類的互動中,不斷地學習、發(fā)展、形成記憶。”
基于Core R3、SPECTRA兩大引擎,“NEON”虛擬人在對人物原始面部、聲音等數據進行捕捉并學習之后,可以自主創(chuàng)建未錄入過的新表情、新動作、新對話,甚至能說其他語言。
其中,CORE R3引擎、被描述為“行為神經網絡,進化生成智能和計算現實領域”的一項進步。R3代表三大特性——現實、實時、回應(Real, Realtime, Responsive)。具體而言,“它使得NEON能夠生成栩栩如生的現實, 并實時地做出回應。甚至可以控制NEON眼睛睜開的大小。” P博士在現場介紹 Neon 時表示。
P博士在接受包括鈦媒體在內的媒體采訪時表示,“CORE R3從自然的規(guī)律性和復雜性中受到啟發(fā),對人類的外觀、動作和互動的方式進行了大量的模擬和訓練,從而能夠生成肉眼無法辨別的、栩栩如生的真實。CORE R3系統(tǒng)的時延不足幾毫秒,確保了 NEON能夠實時地動作和回應。”
鈦媒體獲悉,目前CORE R3引擎平臺還可以與其他的專業(yè)或增值服務的系統(tǒng)進行連接。
SPECTRA平臺則負責提供情報,學習,情感和記憶,與CORE R3平臺互補,給NEON 賦能,從而使NEON的體驗達到“沉浸式”。
STAR Labs 戰(zhàn)略負責人 Bob Lian 作為嘉賓,在鈦媒體于 CES 2020 現場舉辦的 Talk to China Stage(點擊鏈接查看專題報道)上,向鈦媒體獨家分享了關于 NEON 的幕后故事,包括其技術亮點、未來的應用場景以及如何面對爭議。
![]()
STAR Labs 戰(zhàn)略負責人 Bob Lian 在鈦媒體 CES Talk to China Stage 現場
Bob 在鈦媒體CES Talk to China Stage 對話中表示,與其他科技公司的數字人產品不同,NEON雖然基于真實的人進行建模,但數字人所呈現在人們面前的行為都是完全原創(chuàng)的,能做到像人一樣,去笑,去哭,去表達,是被創(chuàng)造出來的一個“數字人”。
此外,與之前的數字人技術不同,NEON的反應是實時的。Bob這樣解釋 NEON 發(fā)明的初衷:
“我們也不想照搬你的特征,在數字世界打造一個同樣的‘你’。我們的目的不是去復制,而是創(chuàng)造一個新的‘人’。”
那么,NEON相關技術,是否會帶來 Deepfake 一樣的關于數據安全等隱患?
關于上述問題,Bob告訴鈦媒體,“Deepfake是通過機器學習,將圖片或視頻合并疊加到源圖片或視頻上,而NEON是完全原創(chuàng)的,NEON沒有對任何圖像、視頻進行處理,不會拼接合成虛假內容,這在應用、技術上都與Deepfake是屬于完全不同的領域。”
在應用行業(yè)上,Bob認為,NEON將會在服務業(yè)與娛樂業(yè)大展拳腳。
在服務業(yè)上,NEON可以在保證給用戶極致體驗下為企業(yè)節(jié)約勞動力。而在娛樂業(yè),NEON可以被用在電影、短片甚至MV中,創(chuàng)造新內容。“虛擬人可以一整天都在展臺展示新產品而不會疲憊倦怠,我們希望能用這項技術和服務,提升客戶體驗。”
Bob 還透露,目前公司還處于初創(chuàng)階段,仍在攻克尖端技術而未過多考慮商業(yè)化的問題,特別是為NEON提供情感、學習和記憶的SPECTRA引擎還在研發(fā)中心,Star labs希望能在年底的“NEON世界”活動上公布更多進展
2020,NEON將保持開放,歡迎更多合作伙伴來討論 NEON 數字人的更多可能。
鈦媒體:請先向觀眾介紹一下你自己?,F在大約有5萬名行業(yè)內的中國觀眾正在通過直播實時觀看我們的鈦媒體CES Talk to China Stage,跟大家打個招呼。
Bob:大家好。我是Bob Lian,STAR Labs的戰(zhàn)略總監(jiān)。STAR Labs其實是一家非常新的公司,我在這邊也只有短短4個月的時間。在這之前,我曾在杜克商學院攻讀MBA,之后加入三星,任職于創(chuàng)新部門,負責開發(fā)創(chuàng)新項目、產品和技術,供給未來的產品線。
鈦媒體:歡迎您。關于三星發(fā)布的新產品 NEON,聽說原計劃是在本次CES上正式發(fā)布,但在此之前,就已經在YouTube上傳開了。我也是在YouTube上最先了解到這個產品。市場對它反應非常熱烈。
Bob: 是的,在社交網絡和互聯網上,大家都在談論我們的產品。很多人對它感興趣,迫不及待地想要一探究竟。在過去的幾個月里,我們一直保持神秘,計劃在本次CES2020上正式揭開面紗。但不幸的是,還是有人提前找到了我們的視頻,并放到了網上。
鈦媒體:那現在既然已經正式發(fā)布了,能否給我們詳細介紹一下這個新產品,它有哪些功能, STAR Labs的研發(fā)工作又花了多久?
Bob:當然,我們叫它NEON,這是一家專注于“人造人”的公司,也就是數字虛擬人物,是通過計算產生的數字化人物。他們生活在虛擬世界里,既沒有身體,也不是機器人。但他們看起來與你我無異,真實感非常強。NEON虛擬人的有趣之處在于他們的反應是實時的。
你可能會在電影里或者電子游戲里看到非常逼真的虛擬人物角色,但這些角色,其實需要多位數字藝術家多年的研發(fā)和努力,才能最終呈現在我們面前。而NEON卻能實現實時創(chuàng)造,100%真實。這些NEON人物會表達,有情感,會像你我一樣做出行為反應,所以當你跟他互動時,會不自覺地把他看作一個真實的人,而不是我們的幻想。
![]()
NEON虛擬人
鈦媒體:為了使NEON真實擬人,必然需要大量數據,我很好奇,您是如何收集到這些信息的呢?
Bob: NEON實際上是模仿了真實人類,這些NEON人物都可以在現實生活中找到原型。就像AI助手,比如Siri,Alexa,是通過模仿真實的人的聲音,通過聲音采集和計算創(chuàng)造出來的。同樣地,我們的NEON虛擬人也是以現實世界的人物為原型。但這些真實人類數據僅用于建模,在那之后你看到的每一幀、每一幅圖像、每一個表達都是完全原創(chuàng)的。NEON的每一次微笑或大笑都是獨一無二,在此之前從未出現過的。我們通過模擬人類創(chuàng)造出NEON,但它卻又是一個新的角色、新的存在和新的現實。
鈦媒體:所以可以理解為,NEON是基于現實世界的真實人類創(chuàng)造出來的?
Bob:沒錯,我們基于真實的人對它進行建模,但它所呈現在人們面前的行為都是完全原創(chuàng)的。不是說完美復刻了另一個人,只是通過借鑒一些特征,使NEON在外觀和表現上看上去更像人,能做到像人一樣,去笑,去哭,去表達。
鈦媒體: 坦白說,我仍然有一些顧慮。我可能比較“過時”,如果模擬我這樣的普通人來說,這可能沒什么;但如果模擬的是公眾人物呢?比如說美國隊長,我非常希望能和以他為原型的虛擬人進行交流,但是從他的角度,他是否愿意呢?所以我想了解,在創(chuàng)造新人物之前,您如何得到現實中這些原型的許可?
Bob:再次重申,我們并沒有復刻任何人,我們也不想照搬你的特征,在數字世界打造一個同樣的“你”。我們的目的不是去復制,而是創(chuàng)造一個新的“人”,一個新的存在。通過模仿真實人類,NEON得以實現絕對的真實性,但模仿絕不是這項科技的終點。
我們希望創(chuàng)造一個有自己的表情、行為、情感、甚至感覺和記憶的新生命,這個虛擬人與現實世界中的任何人都截然不同。即使得到許可,我們也永遠不會去復制別人,以此來保護人們的隱私和身份。
鈦媒體:在我看來,這是一項頗具爭議的新技術。那從NEON發(fā)布以來,您是否有聽到市場上一些不同的聲音呢?
Bob: 當前一個很大的爭議點是圍繞 Deepfake 而產生的。這其實跟您剛剛的問題類似。Deepfake 通過機器學習,將圖片或視頻合并疊加到源圖片或視頻上,這也是在未經用戶許可的情況下進行的。我們與此完全不同,我們沒有進行任何圖像視頻處理,更不要說拼接合成虛假內容了。事實上,就像我剛剛說的,每一個圖像,每一個Neon或虛擬人,每一個場景都是完全原創(chuàng)的,可以說甚至它臉上的每一個細節(jié)都是獨一無二,具有初創(chuàng)性的。我們與深度偽造屬于不同的領域,即使在技術上,這也是全然不同的。
鈦媒體:那您認為NEON的問世會對未來的世界產生什么影響呢?
Bob:我們認為NEON的影響力主要體現在兩個方面。一個是服務業(yè),這是企業(yè)與用戶聯系最密切的行業(yè),用戶體驗至關重要。但有時公司實際沒有足夠的人力,提供完善的客戶服務。比如說,我今天一整天都在我們展臺上展示新產品,我非常疲憊,畢竟作為人,我們會因為有情緒而變得暴躁和不耐煩。但這在NEON身上就不會發(fā)生,它不會疲憊和倦怠,可以隨時保持和藹可親。希望未來能利用這項技術和服務,真正提升客戶體驗。
鈦媒體:服務業(yè)是其中一個方面,那另一方面體現在哪里呢?
Bob:另一個我認為是娛樂業(yè)。NEON可以被用在電影、短片甚至MV中,創(chuàng)造新內容。
舉個例子,假如你是一個歌手,你有著天籟之音,但也許你并不想站在鎂光燈下,或者不愿意跳舞,這時NEON將會是一個很好的選擇。你可以和NEON配合,由他跳舞或表演,制作出類似YouTube MV的新內容,在網上發(fā)布。再比如說,如果你是一位美國的YouTube內容創(chuàng)造者,你想拍攝世界另一端的景象,比如印度,但是你又無法親自去到那里,這時你也可以通過NEON的視角來創(chuàng)造內容,最終呈現給觀眾真實且震撼的效果。
鈦媒體:這聽起來很有趣。接下來讓我們聊聊利潤,相信這也是大家關心的問題。想請問貴公司未來的商業(yè)定位和走向是怎樣的?您認為這項新技術能被大眾廣泛接受嗎?
Bob:希望如此,關于您的第二個問題,我們當然希望Neon能被大眾接受,同時我們也相信NEON能夠最終存在于我們生活當中,并且?guī)椭覀冊谠S多方面改善生活。至于您關于商業(yè)模式的問題,老實說,我們還不確定。就像我說的,這是一家僅存在4個月的年輕公司,我們的團隊主要由科學家和研究人員組成,所以到目前為止,我們的目標是開發(fā)并完善這項我們稱之為Core R3的技術。
![]()
NEON基于兩大引擎:Core R3和Spectra
希望在本次CES上,能向全世界展示這項技術能做到的都是什么,讓人們真切地感受到未來的虛擬人能有多逼真,并對此充滿期待。至于具體商業(yè)模式或我們如何盈利,暫時還沒有考慮太多。
鈦媒體:我明白了,所以現在還停留在攻克尖端技術的層面?
Bob: 正是如此,所以現在我們想先劇透一下,希望在今年,也就是2020年,能找到合作伙伴,并在各種應用場景中進行試驗。
鈦媒體:我了解到有些媒體稱NEON為“數字阿凡達”,那我也聽說Facebook實際上也有一些類似的產品,比如Codec Avatars。相信您對此也有一些了解,那么這些產品與NEON有什么相似之處,你認為它們會成為NEON的競爭對手嗎?
Bob:我想我們所有人都有一個共同的愿景,希望把這些虛擬人物推向市場,真正進入我們的世界。
但除此之外,背后的科學技術是截然不同的。我們的核心技術與其他組織或公司有很大的差異。我自己不是一個技術專家,我可能不知道它背后的準確算法,但從我的研究和學習,從我在實驗室看到的和我們工程師所做的,我們事實上采用了完全不同于其他公司的方法。
我相信NEON所實現的100%真實感在現在的市場上是無可匹敵的。
鈦媒體:讓我們共同期待。接下來,請問您認為NEON在未來所面臨的最大的機遇和挑戰(zhàn)分別是什么?
Bob: 機遇在于不斷豐富的應用案例,正如我剛剛提到的服務業(yè)和娛樂業(yè)。而最大的挑戰(zhàn)可能還是如何讓公眾接受這一新事物,如何向大家介紹虛擬人,讓大家了解它以及它能帶來的便利。這是一個非常棘手的問題,在過去幾天的CES展覽上,我們也一直在為此努力。
鈦媒體:我可以想象這是一件很困難的事情。
Bob:是啊,現在有很多關于虛擬人的科幻小說和幻想,但距離真正讓公眾接受“虛擬人”,我們還有很長的路要走。希望人們能看到虛擬人背后的好處,為什么這對某些行業(yè)有益,以及它將如何改變我們的生活。也希望作為一項技術,它能讓我們更人性化,也讓技術本身更人性化,當然這需要時間。那我們也會盡全力,向世界展示它的好處,告訴大家它不是一件可怕的事,也不是不可思議的。
鈦媒體:請問如何實現讓NEON說話呢?
Bob:當前在聲音方面,還是主要依靠第三方,通過接入第三方API端口,生成語音,畢竟音頻部分不是我們的重點。那我們更關注的領域還是在于如何打造虛擬人的真實感。另外在我們的一些演示中,您也會看到我們使用文本語音來生成各種語言。(本文首發(fā)鈦媒體,編輯/宇航)
快報
根據《網絡安全法》實名制要求,請綁定手機號后發(fā)表評論
這是不是美麗新世界吧?