專注移動端AR+AI動捕技術,「與願科技」想讓C端用戶參與虛擬IP打造

36氪 發佈 2021-08-03T08:24:37.017017+00:00

2007年日本虛擬偶像初音未來的誕生揭開了虛擬偶像產業的序幕。國內首位虛擬歌手洛天依出現於2012年,截止到目前,洛天依微博粉絲已經超過450萬,並為雀巢、百雀羚、必勝客、美年達等多個知名品牌代言。虛擬偶像能給予粉絲更高的參與度,其更穩定的人設也帶給粉絲更多安全感。

2007年日本虛擬偶像初音未來的誕生揭開了虛擬偶像產業的序幕。國內首位虛擬歌手洛天依出現於2012年,截止到目前,洛天依微博粉絲已經超過450萬,並為雀巢、百雀羚、必勝客、美年達等多個知名品牌代言。虛擬偶像能給予粉絲更高的參與度,其更穩定的人設也帶給粉絲更多安全感。

隨著螢幕技術的發展,虛擬IP的展示方式也在向3D進化。由震驚文化孵化的3D虛擬IP「豬小屁」抖音播放量已超24億,微信表情包使用量超過9億;快手孵化的3D虛擬主播「一禪小和尚」粉絲量級已達五千萬,位列素人帳號第一。與此同時,虛擬IP經濟的發展也在倒逼製作技術升級。

傳統的3D虛擬IP製作以CG視頻為主,依賴人工且耗時長。隨著實時角色動作捕捉技術的逐步成熟,市場湧現了魔琺科技等利用AI主機端動捕技術來製作3D虛擬形象的公司。不過由於動捕技術成本較高,目前虛擬IP製作仍然以服務B端客戶為主,如影視動畫、番劇、遊戲和虛擬偶像等內容製作公司。

在UGC內容日益增長的今天,怎樣賦能普通C端用戶進行虛擬形象的創作和傳播會逐漸成為技術發展的方向。36氪近期獲悉,一家名為與願科技Techreate的初創公司正在著力打造適用於手機端的3D虛擬形象製作開發工具。

與願科技成立於2018年,主要基於實時3D交互、即時動捕等技術搭建3D虛擬IP手機端開發平台。目前公司基於移動端攝像頭即時動態捕捉技術實現了表情、身體動作數據採樣,可將真人動作和表情實時融合進虛擬角色。與願科技自主開發的3D虛擬IP軟妹寶已在測試階段。

虛擬IP「軟妹寶」

與願科技的製作流程主要分為四步:1)創意角色設定2)CG角色3D交互模型和材質製作3)實時3D模型骨骼綁定,面部Blendshapes表情製作4)實時互動角色動畫製作。與願自主研發的實時互動角色動畫製作流程取代了傳統製作中的CG動畫、渲染等環節。CEO施運忠透露,與願科技的製作效率相較傳統流程提高了近12倍,其虛擬IP軟妹寶運營成本也僅為傳統虛擬IP形象的三分之一。

與願科技希望將虛擬IP製作技術滲透到C端,通過App等方式讓普通手機端用戶可以一鍵創作虛擬IP並以UGC視頻/圖片的方式傳播。這種方式也可以理解為基於AI算法讓手機攝像頭具備視覺感知和動作捕捉能力,用手機攝像頭替代專門的動捕設備來實現真人對虛擬IP的驅動。與願科技CTO陳超表示,目前已經實現了高端蘋果手機的虛擬IP生成,未來會逐步將技術兼容到更多其他手機機型。當然,這也與手機硬體是否支持相應運算處理能力有關。另一方面,隨著5G的發展,雲端運算的實現有望降低對手機終端的要求從而加快技術落地。

鑒於算法和手機硬體本身的發展,與願科技CTO陳超預計手機端虛擬IP製作工具的普及還需要1-2年的時間。在C端需求爆發前,與願目前主要為B端用戶,如短視頻領域MCN機構等,定製3D虛擬IP。虛擬IP初始製作費用在十幾萬人民幣水平,後續如果參與視頻運營,則以視頻條數為準再加收運營費。

值得一提的是,為了提高IP製作效率,與願科技自主打造了視頻處理算法,即可以通過客戶錄製的視頻直接進行3D動作數據採集生成,省去了由真人穿著動捕設備動作採集的環節。整個視頻處理過程只需要十幾分鐘。除了短視頻MCN機構,與願科技的CEO施運忠表示,其他有人物出境需求的行業,比如教育培訓機構、金融服務機構等,都存在虛擬IP的製作需求,目前已有客戶在洽談中。

虛擬IP可以在完全虛擬的場景中使用,比如動畫片拍攝,也可以通過混合現實技術與真實環境相結合。在與願科技團隊看來,隨著MR技術的發展,虛擬IP的混合現實端對C端用戶有更大的吸引力。CEO施運忠還強調目前與願輸出的產品以製作工具為主,未來希望圍繞混合現實端的虛擬IP進行更全面的生態開發。

公司目前已經開放天使輪融資,團隊在接洽投資機構中。

圖片來源:pexels

關鍵字: