進軍“元宇宙”第一步,先造個虛擬人。
注意,虛擬數字人已經開始“入侵”我們的生活了!
不知道你有沒有發現,我們的生活中出現了不少虛擬數字人的身影。9月22日,小紅書推出了“潮流數字時代”計劃,推廣一批虛擬數字人作為博主發布筆記;B站專門為虛擬主播開設了分區;湖南衛視的小漾將作為首個虛擬主持人出現在電視屏幕上,這些信息都透露著虛擬數字人市場正在升溫。
虛擬數字人CELIX走秀現場
不僅如此,近一個月在科技圈內不但有OPPO發布了自己的首個虛擬數字人小布,而且騰訊也推出了3D超寫實等五種數智人,國外英偉達甚至還“偷偷”造了個迷你版的黃世勛——虛擬數字人Toy-Me。
從左到右分別為英偉達Toy-Me;OPPO虛擬數字人小布;騰訊五款數智人;樂華娛樂旗下的虛擬偶像女團A-SOUL
這些形態各異的虛擬形象都屬于虛擬數字人嗎?事實上目前行業內關于虛擬人、數字人又或者是虛擬數字人這些概念,還處于一個各自為戰的狀態。
目前,比較官方的定義來自中國人工智能產業發展聯盟首次發布的《2020年虛擬數字人發展白皮書》報告。報告提到,虛擬數字人指具有數字化外形的虛擬人物,將依賴顯示設備存在,并且擁有人的外貌、人的行為以及人的思想。
有行業報告顯示,2020年中國虛擬數字人行業市場規模約2000億元,未來隨著市場接受度拓寬,2030年中國虛擬數字人市場規模將達2700億元。
虛擬數字人不但成為科技公司角逐的藍海市場,而且也成為文娛行業“接軌”元宇宙的新方向。虛擬數字人到底指什么?它的背后有哪些技術成為支撐?虛擬數字人真的會是元宇宙賽道的新風口嗎?
聲音 | 騰訊副總裁邱躍鵬:國內的區塊鏈技術服務商要耐心地從底層開發做起:7月20日,2019年首屆“數字云南”區塊鏈國際論壇在昆明舉行。騰訊副總裁邱躍鵬在會上表示,區塊鏈的未來發展的幾個關鍵點。首先,區塊鏈只有和場景有效融合,才能充分發揮價值。我們看到,區塊鏈適用的場景還比較有限,未來區塊鏈能否與各種生產活動有效融合,成為驅動生產力發展的重要引擎,是決定這個技術生命力的關鍵。我們需要對區塊鏈技術有開放的心態和其顛覆性價值的真正的理解。既不能將新的技術拒之門外,也不能人云亦云,需要積極推動區塊鏈在真實有效行業場景中落地。其次,需要在易用性和對內安全性等技術上進一步提高區塊鏈的性能。對應的技術要素包括隱私保護和私鑰存儲。站在商業應用的角度看,區塊鏈帶來了信息的共享,但隱私保護是商業應用中最需要關心的點。最后,目前主流的區塊鏈技術平臺均發源于國外,國內的區塊鏈技術服務商要耐心地從底層開發做起,做到技術自主可控。[2019/7/21]
帶著這些問題,智東西與國內動捕巨頭公司諾亦騰CTO戴若犁、虛擬數字人公司創幻科技CEO陳堅等相關的行業人士進行了深入交流,看到了虛擬數字人背后的技術支撐和落地情況。
本文福利:在人工智能、虛擬現實等新技術浪潮的帶動下,以虛擬主播、虛擬員工等為代表的數字人成功進入大眾視野,并以多元的姿態在眾多領域大放異彩。推薦精品報告《虛擬數字人發展白皮書》,可在公眾號聊天欄回復關鍵詞獲取。
真假虛擬數字人,你分得清嗎?
談起虛擬數字人,你的腦海里會呈現出誰的樣子,是出現在春晚上的虛擬歌姬洛天依,還是清華的虛擬學生華智冰,又或者是你手機里軟萌可愛的虛擬語音助手,甚至還有可能是B站上唱跳俱佳的虛擬主播們。
不同類型的虛擬數字人代表
虛擬數字人系統一般情況下由人物形象、語音生成、動畫生成、音視頻合成顯示、交互5個模塊構成,其中,人物形象分為卡通、擬人、寫實、超寫實等風格,像虛擬網紅翎Ling這類就屬于超寫實虛擬人,而交互模塊中可以分成交互型虛擬數字人和非交互型虛擬數字人。
聲音 | 騰訊區塊鏈業務總經理:區塊鏈技術還處于比較早期的階段:據中國青年報,騰訊區塊鏈業務總經理蔡弋戈在接受“區塊鏈和供應鏈金融”采訪時表示:“平臺通過區塊鏈連通供應鏈中的各方企業和金融機構,完整真實地記錄資產的上鏈、流通、拆分和兌付。由于區塊鏈上的數據經多方記錄確認,不可篡改、不可抵賴、可以追溯,從而實現應收賬款的拆分轉讓,并全部能夠追溯至登記上鏈的初始資產。區塊鏈天然就是能解決信用的技術,在金融場景它是富有很多潛力的。”還談到區塊鏈技術的成熟度,蔡弋戈坦言:“技術還處于比較早期的階段,市場對區塊鏈技術還沒有那么了解,你急不來,如果人為急的話,只會造成泡沫。”[2018/11/6]
智東西整理來源:《2020年虛擬數字人發展白皮書》
根據虛擬數字人不同的核心交互方式,虛擬數字人分為智能驅動型虛擬數字人和真人驅動型虛擬數字人。
智能驅動型虛擬數字人是以深度學習技術為主,本質上還是某種算法,但會擁有一個定制化的虛擬外表。他們主要以“數字化”為核心,像是初音未來、小布以及華智冰分別在文娛、語音助手、教學領域應用的成果。
英偉達CEO黃世勛的虛擬形象Toy-Me正在與人交流
真人驅動型虛擬數字人是以真人為核心,用戶可以通過3D建模、動作捕捉技術、渲染等技術,在網絡上形成一個自己的虛擬化身。比如說,B站里的部分虛擬主播們通過動作捕捉平臺,建立自己的虛擬形象,并以虛擬形象的方式與其他用戶互動或者表演。
B站虛擬主播超次元次元醬表演秀
在創幻科技CEO陳堅看來,只有能完成實時互動的才能稱的上是虛擬數字人。“現在一些虛擬數字人的概念還是通過視頻和照片為主,這種不能算作真正的虛擬數字人。”
他同時還說道,只要具有實時互動功能的數字人都有價值空間,也會成為元宇宙的重要組成部分。從短期來看,智能驅動型虛擬數字人,像虛擬客服、虛擬主持人、虛擬導游都在企業市場擁有廣泛的應用空間,但是從長遠的爆發力來說,以真人驅動的虛擬數字人才是元宇宙的核心入口。
他舉了個例子,日本VirtualMarket用了三年的時間舉辦了六屆虛擬漫展,參與人數遠高于國內的ChinaJoy動漫展。“未來每個人都會在3D互聯網中擁有自己的虛擬身份,當大家可以開始虛擬逛街、虛擬逛展時,就會擁有更大的應用空間”。
聲音 | 騰訊云金融業務中心敖萌:去中心化貨幣并不是唯一價值流通:騰訊云金融業務中心區塊鏈首席架構師敖萌撰文指出,在現有經濟系統中,貨幣的發行是中心化的,貨幣的流通是去中心化的,而貨幣的回籠是部分中心化的(貸出去的那部分)。在Token經濟學里面,虛擬貨幣并不是唯一流通的價值,絕大多數物品都可以Token化,然后上鏈進行流通。因此,在Token經濟學里面,去中心化貨幣并不是唯一的價值流通和度量的客體,所以,一個固定總量的去中心化貨幣并不一定會導致被市場拒絕。[2018/7/24]
日本虛擬漫展VirtualMarket6展會現場
講完了虛擬數字人的基本概念,我們來看看虛擬數字人究竟是什么樣子?
在虛擬數字人剛起步的階段,由于渲染技術、網速等原因常常會出現虛擬數字人突然“死機”,又或者呈現表情生硬、肢體不協調等情況,導致虛擬數字人往往都走在各類“翻車”的路上。
比如說,在天氣預報的直播現場虛擬主持人突然360度來了個失敗的“托馬斯全旋”。
又或者是這樣,在虛擬偶像綜藝現場,由于計算能力和渲染能力的不足,幾個虛擬偶像突然開始表演“千手觀音”,場面一度很鬼畜。
國內虛擬偶像綜藝直播現場
從這些事故畫面中能看到,盡管虛擬數字人已經在不同領域擁有了自己的應用場景,但是在技術上還仍未成熟。
后來,隨著研發人員不斷嘗試新的技術,尤其是在動作捕捉技術上的突破,現在的虛擬數字人可以借助VR設備,與用戶實時互動交流,不但能唱歌聊天,還能跳舞,在互動上呈現了多樣的方式。
虛擬偶像遠程互動
騰訊云與同方全球人壽將在區塊鏈等領域展開合作:5月24日,騰訊舉行“云+未來”峰會期間,與同方全球人壽簽署了戰略合作協議,雙方將在金融云平臺、金融大數據、區塊鏈、智能客服、人工智能等多個層面展開深入合作,助力保險業務高質量發展。[2018/5/24]
比如說,用戶可以通過佩戴VR設備,直接與虛擬偶像泠鳶yousa實時互動。而上面這個二次元人物的背后,正是虛擬泠鳶yousa佩戴者相應的動捕設備,做出相應的舉動。
我們可以看到,虛擬數字人目前可以簡單分為以真人驅動和以數字驅動的兩種形式。其中,以真人驅動的虛擬數字人逐步克服了此前的肢體語言單一,面部表情單一等特點,開始擁有更加活靈活現的數字形象。
據目前落地的結果來看,打造一個虛擬數字人,不僅在創建準備環節有所難度,而且如何在多個虛擬人演出的時候實現實時渲染、以及及時調整人物渲染的細節等方面同樣面臨著一定的挑戰。
打破兩大技術壁壘虛擬數字人如何更像“人”?
倒退十年,你如果想給自己打造一個虛擬形象,可能需要花費數十萬元去買專門的設備,聘請專門的拍攝團隊才能擁有一個活靈活現的虛擬形象,但現在你可能通過一臺電腦就能為自己打造一個簡易的虛擬化身。
B站CEO陳睿在嗶哩嗶哩周年演講時提到,在過去的一年里共有超過32000名虛擬主播在B站開播,同比增長40%,虛擬主播已經成為B站直播領域增長最快的品類。
這一切都要歸功于研發人員在制造虛擬數字人的兩大重要環節——動作捕捉技術和渲染技術上做出的突破。
B站虛擬主播分區
1、解構四大動作捕捉方案,最高可實現毫米級誤差
如何讓虛擬數字人更加生動?動作捕捉方案是其中的關鍵要點。動作捕捉是指通過數字手段記錄現實人們的運動過程。過去的一些科幻電影和游戲中,人們常常通過基于攝像機的動作捕捉系統完成對于一些科幻角色的塑造。同時,動作捕捉系統根據實現原理的不同,可以分成光學動作捕捉、慣性動作捕捉、Track設備+IK算法的動作捕捉、以人工智能為主的動作捕捉方案。
騰訊首席戰略官:騰訊不會投資比特幣,但是還能投資其他稀缺資源:在騰訊投資閉門會議中,騰訊首席戰略官詹姆斯?米切爾表示:“鉆石和比特幣都沒有內在價值,但是稀有所以價格昂貴比特幣的儲量也有限。總共只有兩千一百萬個比特幣可以被開采,人們已經開采了全部儲量的80%左右。鉆石和比特幣都沒有內在價值,但是因為稀有所以價格昂貴。騰訊不會投資比特幣,但是還能投資其他稀缺資源。”James認為,比特幣通過算法嚴格控制自己的總數,但是沒有辦法控制其他數字貨幣的數量,所以無法預測比特幣未來在整個數字貨幣市場的比例,因此也無法計算它的價值,這是比特幣的悖論。[2018/2/28]
光學動作捕捉方案是當動捕演員在特定的部位粘上特殊材料,攝像機通過反光來捕捉這些特殊材料的位置變化,從而完成對演員的動作捕捉。
目前,光學動作捕捉方案能通過高幀率的捕捉,實現毫米級誤差精度,能對人物動作還原最為精細,但這類捕捉方案對于背景環境的要求較高,技術門檻也同樣較高。
光學動作捕捉技術
在光學動作捕捉設備和方案上,國內外都涌現出一些較為優秀的公司代表,比如說影視動捕巨頭VICON公司以及國內利亞德集團下的北京虛擬動點科技有限公司。
北京虛擬動點科技有限公司的成立與美國光學巨頭公司NaturalPoint離不開關系。利亞德集團在2016年11月4日宣布,計劃通過旗下的子公司平達公司,以8.44億元人民幣全資收購了美國光學巨頭公司NaturalPoint,同時也收下了其旗下OptiTrack產品系列,隨后成立了北京虛擬動點科技有限公司。
OptiTrack的光學動作捕捉方案可以通過兩個以上的高速智能攝像頭對于移動目標進行定位,并記錄相應數據,從而“復現”人物的動作和表情。
據利亞德集團COO、虛擬動點董事長姜毅介紹,當兩個人戴上VR眼鏡進行傳球動作,OptiTrack運動捕捉系統可以及時抓取一人動作,并傳送到另一個人的VR眼中,整個傳輸過程中,OptiTrack實現了高精度、低延遲、以及穩定可靠的傳輸過程。
而慣性動作捕捉方案,主要是通過人物在各個關鍵佩戴的慣性傳感器,并且對一些主要的部分進行實時測量,是比較主流的動作捕捉方案之一。
我們常見的動作捕捉服、手套等設備都是屬于這類慣性動作捕捉范圍內。
《指環王》動作捕捉演員AndySerkis
甚至現在也出現了人們通過慣性動作捕捉技術打造一個虛擬數字人來直播帶貨。
卡通形象的虛擬數字人直播帶貨現場
在慣性動作捕捉技術的賽道里,國內廠商諾亦騰、國外廠商XSens都擁有比較成熟的產品。其中,諾亦騰通過全身17節點慣性傳感器、全身綁帶、傳感器充電盒以及EVA便攜箱等組成部分打造了入門級無線動作捕捉系統PerceptionNeuron3。
第三種則是以Track設備+IK算法的動作捕捉方案,主要通過Track設備以及IK算法相結合,模擬出一定的動作姿態。這種動作捕捉方案在一些消費級的產品上運用較多,也頗受硬核技術流玩家們的喜愛,他們可以搭建自己的動作捕捉設備方案。
此前,英國實時動作捕捉技術開發商IKinem也基于這樣的模式推出了Orion2.0產品,該產品通過與不同的硬件設備兼容,實現跟蹤數字化身的全身運動軌跡,后來該公司以及其產品線被蘋果收購。
最后一種則是近期大火的以人工智能為核心的動作捕捉方案,借助設備上自帶的攝像頭,如iPhone里搭載的深感攝像頭實現面部捕捉功能,并且通過深度學習,訓練算法將2D圖像轉換成3D圖像,從而讓一些坐著的主播可以擁有一個活靈活現的虛擬形象。
由于這種動作捕捉方案對硬件要求較低,多數依靠軟件層的算法,因此具有較為廣泛的應用空間和利潤空間。
以人工智能為核心的面部捕捉技術方案
“如果對自由度和視角的要求不高的話,這類基于計算機視覺關鍵點識別的動捕方案,會是消費者和從業者比較容易接觸到的,因為不會涉及到新的成本,好一點的手機上的攝像頭就可以實現基礎的身體與面部捕捉”,國內動捕巨頭公司諾亦騰CEO戴若犁說道。
對于動作捕捉技術未來的發展,戴若犁提到,之前動作捕捉系統主要是面對科研、影視等專業領域,因此,在系統復雜度以及成本上基本上不太適用消費級市場。“在大家都過了新鮮勁之后,如果虛擬人賽道不再適用于消費者市場的話,未來的動捕技術還是會為面向專業領域的從業者服務”。
2、主打Unreal和Unity渲染引擎,顏值和交互性成虛擬數字人渲染關鍵
除此之外,當人們通過不同的設備記錄下自己的動作方案之后,還需要通過渲染引擎,對毛發、衣物等細節盡量還原。如果單從引擎性能上來說,游戲領域的渲染引擎達到最好的渲染效果。目前,國內虛擬數字人主要通過Unreal、Unity游戲引擎對人物形象進行渲染。
據陳堅介紹,渲染成果主要關注好看和好用兩個方面。其中,好看是指視覺效果上能做到什么樣的精細程度,而好用功能上,首先要考慮多個角色同臺時渲染的效果,在直播過程中能否及時調整細節。“這些才是決定你的虛擬數字人產品化程度的關鍵”。
同時,據國外媒體報道,EpicGames推出了云端流式應用MetaHumanCreator,可以讓用戶在一小時時間內,不但能實現實時動作捕捉,還能完成人物的渲染,讓用戶可以輕松上手創建虛擬數字人。
總而言之,目前的虛擬數字人主要依靠光學動作捕捉、慣性動作捕捉、Track設備+IK算法動作捕捉方案和以人工智能為核心的動作捕捉方案為主。
并且,在渲染引擎上,廠商們主要通過Unreal、Unity完成人物渲染,在時間成本上也將渲染的時間縮短到一兩天左右。
制造難、交互難、成本高虛擬數字人爆發還需解決三大難題
近期,元宇宙概念爆火,不少行業人士提到元宇宙的落地可能會分為幾個階段,其中用戶的數字分身可能會在第一階段率先落地,因為無論是在虛擬世界里還是在物理世界中,人都是不可缺少的組成部分。
盡管目前虛擬數字人賽道上已經逐漸升溫,但距離虛擬數字人賽道爆發還差了一些“火候”,比說在制造門檻等問題上,虛擬數字人發展仍然面臨一些挑戰。
一方面,虛擬數字人的制造門檻仍是將絕大部分的用戶拒之門外,不但無法讓虛擬數字人賽道擁有更多樣的玩法,同時也無法創造新的價值空間。
另一方面,降低硬件的成本門檻也同樣重要。在交流的過程中,陳堅告訴智東西為什么動作捕捉設備價格這么高。他談到盡管看起來近期虛擬數字人概念比較火熱,但產業上并沒有太大的改變。
戴若犁也同樣提到這一點。他認為,現在市場上并沒有成功的案例來證明虛擬數字人賽道存在一種可行的商業模式。“多數虛擬數字人還處于創新的階段,主要依托于現有真人已經摸索出的商業模式。”
“我覺得當虛擬人市場的活躍用戶數量達到上萬,甚至是數十萬,并且有相當比例的用戶愿意為虛擬人二次復購的時候,虛擬人市場才能稱上有比較穩定的商業模式。”
他舉了個例子,當某個虛擬數字人群體擁有上萬的用戶群體,每次某個虛擬人開播可以有百人左右的在線用戶,并且能拿下五十個左右的訂單。當這種商業模式可持續發展時,虛擬數字人的商業模式才算成功。
此外,VR/AR設備將會為虛擬數字人帶來全新的交互方式。陳堅提到,“虛擬數字人可能會成為元宇宙的入口,因為只有當人人都擁有虛擬數字人之后,元宇宙才初見雛形”。
但在這其中,VR設備將是連接虛擬數字人和元宇宙之間的重要橋梁。“當我們通過VR/AR設備把社交聊天、劇本殺這類活動移到在虛擬空間完成,并且所有的用戶都能擁有自己的虛擬分身時,元宇宙可能會迎來一輪新的爆發。”
結語:虛擬數字人能成為元宇宙的“入口”嗎?
根據現有的資料看來,虛擬數字人在概念上、商業盈利模式上以及市場規模上都處于比較早期的階段。無論是動作捕捉技術,還是渲染技術方面,如今的虛擬數字人行業仍是面對企業市場為主,但部分業務也開始嘗試在C端市場落地。
盡管虛擬數字人領域借著元宇宙熱潮逐漸升溫,但是目前并沒有一個真正圍繞虛擬人衍生出的新的商業模式成功運行。各路巨頭的涌入將推動虛擬數字人的商業模式更加清晰,同時,有著相關技術積累的虛擬人公司也將為元宇宙的生態發展提供技術基石。
虛擬數字人能否在創造出自己在下一代互聯網的新玩法,最先為元宇宙創造一個“入口”?我們期待著“人人都可虛擬化”的時代,會帶來新的驚喜。
作者?|??徐珊
Tags:數字人區塊鏈元宇宙比特幣數字人民幣是什么意思怎么使用see區塊鏈的未來發展前景作者是誰元宇宙數字虛擬人的上市公司買比特幣的人是不是都發財了
疫情發生以來,世界各國人民的生活都受到嚴重影響。我們許多人失去了工作,企業開始關閉實體店,轉向網上銷售,游樂園和社交聚會被禁止,等等。人們別無選擇,只能走向數字化.
1900/1/1 0:00:00小紅書的數字藝術平臺R-SPACE正式上線了。這是在國內繼阿里、騰訊之后又一家涉足NFT領域的行業巨頭.
1900/1/1 0:00:00DAO已成為Web3.0的核心組成要素。人不是天然就要為公司工作。直到1820年,只有20%的美國人以工資為生,其余人則經營耕種、捕魚等生意.
1900/1/1 0:00:00我們調查了七個試圖推翻以太坊的項目,我們介紹了這七個中的每一個,并簡要討論了他們的技術以及他們如何從以太坊竊取王冠。顯然,一些項目在交易速度、成本等因素方面取得了重大進展.
1900/1/1 0:00:00游戲中滿足欲望的門檻比現實生活中要低,人們可以通過它來滿足他們的基本欲望。隨著加密貨幣游戲領域日漸飽和,人們對它的看法沒很少帶有細微的區別,而是在“一切都是龐氏騙局”到“加密貨幣游戲將永遠從根本.
1900/1/1 0:00:00在海南,使用數字人民幣支付正在成為越來越多消費者的選擇。去年11月,海南被新增為數字人民幣試點地區,也成為國內唯一一個全省試點的地區.
1900/1/1 0:00:00