简单、快捷、低成本的超写实虚拟人平台来了……
本篇文章探討數字虛擬人大爆發前的必要條件。
雖然數字虛擬人越來越受關注,如果要迎來大爆發,虛擬偶像甚至能部分替代頻頻爆雷的真人偶像地位,但是還需要新平臺的出現。
?
因為,數字虛擬人從表面上看是一種娛樂,但本質上,數字虛擬人是新的網絡應用服務,像社交、電商、外賣一樣,需要強大專門的、專為虛擬人/虛擬偶像服務的平臺。
新平臺首先要做到:將打造超寫實數字虛擬人的高門檻、高投入真正降下來,變成普及化服務。解決現在如果想開發超寫實虛擬人,花費很貴、難以實時直播、也無法快速批量生產內容等諸多問題。
比如一些超寫實的數字虛擬人,目前也只是能做到發幾張圖片的程度,做到視頻的很少,既少也不足。
某高知名度的新消費品牌,推出了廣受好評的品牌虛擬人形象,但公布的也只是一張圖片,據了解還在非常初期的階段,并沒有真正進入到動態內容開發。
目前市場上的虛擬偶像天團,只是幾家娛樂大公司的燒錢游戲,一個4人虛擬偶像天團,可以在短短幾年內燒掉近億元的資金,而且還遠沒有達到高仿真的程度。
這些都亟待新平臺的出現來解決,而眾多巨頭都在進行布局。
我最近發現,新發布的百度智能云“數字明星運營平臺與燦星計劃”,有可能就是這樣的平臺,它正是朝著讓超寫實虛擬人開發,變得更簡單快捷、更低成本、更易運營這一方向去的。
?
簡而言之,百度“數字明星運營平臺”能做到:
?用 AI 智能的方式?
快速打造數字虛擬偶像?
?
打造的虛擬偶像既有 3D 超寫實的、直接在真人基礎上生成的,也有半寫實或二維的、寵物化的,都能做到高效、快速生成。而且是一體化智能平臺,既能打造 IP 也能運營 IP,和我期望的新平臺非常接近。
?
就在8月18號,和央視新聞聯合舉辦的“百度世界2021”上,已經展示了幾個典范案例,包括將央視著名主持人、真人明星龔俊都變成了數字虛擬人,以及 Q 版的火星車數字人等,展現了各種可能和場景。
“數字明星運營平臺”的黑科技非常多、待我一一道來。
?用簡單快捷的 4D 掃描+人工智能?
?直接打造超寫實虛擬人?
目前的超寫實虛擬人開發實在是太麻煩了:
高精度原畫設計;
高寫實 3D 建模;
導入高水準的虛擬人引擎;
高精度動捕;
高精致的修幀渲染;
這個流程還沒包括人工智能,只做出形象和動作而已。這必然導致成本高昂、流程復雜,不懂行的人根本做不好。
而在“數字明星運營平臺”上,情況會有重大改變:你可以不用去找 CG 公司做 3D 建模,也能打造出足夠漂亮、足夠高仿真的 AI 智能虛擬人。因為平臺會通過 4D 掃描技術+人工智能,把你找到的真人變成有智慧的超寫實虛擬人。
你只需找到符合自己要求的真人美女帥哥,當然孩子和老人也行,剩下的事情,就是由平臺來幫你轉化為超寫實虛擬人,節省大量精力時間,也肯定比開發 3D 高仿真模型要省錢。
?
千萬不要小看這件事,這意味著,哪怕你不是做動畫的、不是做 3D 的、甚至不是做 IP 的,也可以開發出足夠好的超寫實虛擬人。這也意味著,任何網紅也能直接把自己變成數字虛擬人了,而無需繁瑣的建模工作,具有極為廣闊的應用領域。
?
根據我拿到的第一手資料,描述一下這個開發過程:
第一步,用高精度 4D 掃描技術,對人體進行全方位掃描,捕捉真人的細膩表現。
?
第二步,用人工智能機器深度學習掃描數據,并用人工智能算法組合驅動豐富真實的實時面部表現,從而超高精度還原真人模特。
數字虛擬人的動態精模
顯著提升虛擬偶像“真情實感”的品質
其實我以前見過用掃描生成的 3D 人,但由于沒有結合人工智能,表情很不自然,尤其是口型失真,做出來的只是泥塑木雕的 3D 升級版而已。
所以結合人工智能進行深度學習和算法非常重要,只有結合了 AI,3D 人才可能顯得有“真情實感”,才有資格稱為“虛擬人”。
這是百度用 4D 掃描+人工智能所做的龔俊數字人,盡可能還原真人偶像的氣質和魅力。
?
這是百度為央視網開發的全新升級版數字人小 C,也作為奧運信息搜羅官,出現在剛剛結束的奧運會上。?
第三步,設定五個關鍵維度,即表情、口型、毛發、布料、身型,來打造超寫實虛擬明星,尤其是加入了表情可變的口型合成算法,讓用戶觀感更親切自然,徹底解決口型和表情失真的問題。
數字虛擬人的表情
實現親切自然的情感傳遞
數字虛擬人的口型與表情配合
用 AI 解決口型+表情容易失真的問題
毛發、布料與身形
盡可能細膩、自然和豐富
總之,只要有真人模特,平臺就能幫你做出盡可能真實、自然、精細,以及實時驅動的虛擬偶像。
?只需高精度照片或攝像頭?
?就能生成超寫實虛擬人?
上一種方法還需要真人模特,和專門的高精度掃描。
平臺還有更極致的簡單快捷辦法:用標準人像照片或攝像頭來生成。這種方法只需要高精度照片或視頻。
方法1:你提供從單張或多張高精度照片,上傳到平臺,由平臺生成超寫實虛擬人的模型。
方法2:你也可以通過高精度攝像頭進行面部捕捉和動作捕捉,上傳到平臺,同樣也能生成超寫實虛擬人的模型。
方法3:直接提供高精度視頻也可以。
當然,要做出超寫實虛擬人不只這么簡單,平臺還需要從妝容、發型、服裝、音色等各個方面進行再調節,通過5個維度、15項參數,不斷裝扮出新鮮感。
?
在這背后,平臺需要建立豐富的妝容庫、發型庫和衣柜,以及各種音色庫供選擇。
還有一個趣點:為了保證虛擬人不會做出不雅觀的表現,平臺專門設計了基于 AI 技術的數字人表情管理引擎,確保各種虛擬人的驅動表現儀態大方。
?
總之,一張照片就有可能生成一個虛擬人 IP,然后發展為一個百變的虛擬明星。
?
我發現這樣做,不僅是在造星,還意味著所有經典的、甚至是去世的真人明星、偶像,只要獲得家屬的授權許可,也能直接轉化為數字虛擬明星,繼續唱歌、跳舞和演出……
?
這有點永生的感覺,在元宇宙的虛擬世界里,生者與逝者,永遠繼續生活在一起……
?一句話生成形象 IP?
?說出來等于做出來?
這是比前兩種方式更極致簡單的方式:讓普通人可以用一句話的簡單描述,即可自動生成個性化 3D 虛擬數字形象。
?
你只需說出你想要的形象,說等于做,說出來就是做起來。比如——
1. ?你用語言描述形象的五官特征或者服飾,例如:幫我生成一個大眼睛的穿著裙子的女生。
2. ?你也可以用形容詞描述形象,例如:幫我生成一個英俊、幽默的虛擬形象。
3. ?你還可以指定明星或職業等形象,例如:幫我生成一個長得像 xx 明星的虛擬形象等。
然后,平臺系統就幫你生成、實現出來,然后不斷調整、優化。
?
“一句話生成”的設想,準備在百度 Apollo 智能車聯的新一代車載虛擬智能助手中落地。
?
設想一下,你作為老司機,你只需動動嘴,描述出來,就可以輕松擁有一個專屬的虛擬形象助手,非常有趣、非常高效,而且生成的汽車虛擬助手也很多樣化和個性化。
?
這背后的黑科技,是百度增強現實技術部正在研發的 3D 虛擬形象智能化生成方案,通過在語音識別、自然語言處理、知識圖譜和增強現實等技術方面的深厚積累和跨模態多技術融合,加上海量的人物知識數據,才有可能實現。
?
現在正在建立的是——
專屬虛擬形象知識庫,實現對虛擬形象全維度的特征描述;
基于人臉圖片的形象重建、特征提取,實現用戶專屬個性特征的實時復刻;
基于語音/自然語言處理實現多輪對話式自然交互,使得用戶交互更加友好高效。
我認為“一句話生成形象”的應用場景遠遠不只是車載助手——
比如購物者可以一句話生成自己希望的虛擬導購員;學生可以一句話生成自己希望的虛擬教師;游客可以一句話生成自己希望的虛擬導游;甚至宅男宅女可以一句話生成自己的夢中情人……
?
這些都是在科幻電影電視劇中出現的設想,很快就會來臨。活在當下,就是活在未來……
?用 AI 增強?
?IP 角色的表達力?
?
前面介紹的都是如何生成 IP 形象,下面的則是如何增加 IP 角色的表現魅力來快速打造內容。
?
這對短視頻制作尤其有用。比如 AI 演同款,就是用 AI 技術自動學習熱?短視頻,結合自己的 IP 角色,就能一鍵生成表演同款視頻了。
又比如 TTS 視頻,TTS 指的是文字演繹,你只要輸入一段動作描述文字,就能自動生成一條相應動作的短視頻。
又比如 AI 唱歌,通過 TTS 轉化唱歌,虛擬人的口型、表情、動作都自動與歌曲合拍。又比如 AI 跳舞,可以通過對 2D 動畫的舞蹈進行動作識別,再讓 3D 人物學會跳舞。
還有 AI 動效,通過圖像識別技術,匹配 UI 動效,增加角色的趣味性。以及 AI 換臉,如果品牌更換代言人,可以直接在原有內容上,更換品牌代言人的臉,快速生成運營內容。
?
以上這些,顯然都能極大簡化虛擬人短視頻生產的復雜度,甚至做到一鍵生成,這樣一來,虛擬人短視頻就能具備和真人視頻比產量、比速度的能力。
?
傳統動畫視頻的生產制作都是相當緩慢的,即使想做快也快不到哪里去,往往還過于簡陋。
?
而結合 AI 增強的虛擬人視頻演繹,將有機會開啟一個超級生產的時代。這對現在的短視頻制作生態有相當大的顛覆作用,也對未來產生不可估量的影響。
?充分兼容導入已有 3D/2D 模型?
?
這意味著——現在已有的眾多 3D、2D 動漫角色,可以直接在平臺上轉化為自己專屬的數字虛擬人,省去了 IP 創作方的再開發時間。
?
也就意味著,現有眾多高創作力、低技術能力的 IP 開發方,直接具備轉化自己的 IP 為虛擬人的能力,可以無需建模、快速做出自己的數字虛擬人,甚至是虛擬偶像。
?
設想一下到未來,從喜羊羊灰太狼到熊出沒光頭強,從哪吒到姜子牙,從許仙到白蛇青蛇,從刺客伍六七到非人哉、全職高手,都能彼此交互的場景吧。這將開啟全 IP 的虛擬世界……
?
“數字明星運營平臺”上的其他功能,還包括20位現成虛擬偶像,讓你可以先不急著打造新的 IP,直接在平臺上選擇,快速一分鐘上崗。
以及三種驅動模式:AI 驅動、擬合驅動和真人驅動,讓你既可以不需要真人直接用 AI 智能驅動,也可以用真人在背后進行“中之人”演繹。
?
還有豐富的數字資產庫,包括多種風格類型的場景庫、讓鏡頭表達更自由的機位鏡頭庫、道具庫(包括動態道具)、貼紙庫、音效庫、服裝庫、發型庫、表情庫、動作庫等等。
?
這些都很直觀易懂,不必做詳細介紹。
?IP 運營平臺與燦星計劃?
?
“數字明星運營平臺”不只能開發 IP,還能運營 IP,是一體化智能的閉環體系。而“燦星計劃”是可以和所有現有 IP 運營者進行合作的計劃。
簡單來說,就是通過平臺的支持,讓不具備制作和運營數字虛擬人的 IP 開發者、眾多品牌,直接具備開發和運營能力,從而增加 IP 所有者的各種收入。
?
比如,可以通過平臺進行 IP 直播帶貨、IP 直播社交、還可以進行 IP 商業演出、進行 IP 廣告代言、IP 聯名,甚至可以讓 IP 參演各種影視。
既可以合入百度現有的商業生態里,進行比如開屏廣告、信息流廣告、直播賣貨和聯名營銷等,也可以在百度之外的平臺上進行。
?
平臺還建立了三維虛擬演播室系統,可以直接將虛擬人 IP 內容,推流到各大平臺,而且不限于在百度,當然,在百度生態內還會有流量扶持計劃。
?
所有這些,都是通過“數字明星平臺”,用最簡單、快捷的方式實現。
從現在到未來,數字虛擬人有兩種最重要的表達:
?
一個是“代表我”:在社交娛樂等領域,虛擬形象成為人們創造個性化分身的基礎設施,在不同場合下,讓人們充分表達自我,釋放個性。
另一個是“服務我”:各種服務趨向個性化、定制化,虛擬形象作為服務的實體化表現,有機會成為人們的私人助理、朋友甚至伴侶,為用戶提供情緒價值和實用價值,參與用戶的生活。
?
前者是用戶個人的虛擬人化,后者是品牌、商業服務的虛擬人化,共同構成了未來的元宇宙。
?
一個能簡化數字虛擬人創意生產制作的新平臺,能充分幫助實現這一切,產生無限的可能。
?
當平臺讓數字虛擬人的開發和運營,變得簡單、快捷、高效和低價時,就有可能實現——眾多品牌+眾多創意小團隊+個人創造者的共贏生態平臺。
數字虛擬人才能夠成為互聯網的基礎服務,實現從購物到娛樂、從教育到新聞、從內容到社交的大爆發,一直到元宇宙……虛擬人是元宇宙的奠基石。
*本文轉載自 IP 蛋炒飯公眾號
總結
以上是生活随笔為你收集整理的简单、快捷、低成本的超写实虚拟人平台来了……的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 如何在win 8的64位下破解安装EPL
- 下一篇: 使用函数 imnoise 对图像添加噪声