
想象一下過去玩運動游戲時的場景:用戶想要把自己的臉掃描進系統(tǒng)中,但是系統(tǒng)一直瘋狂提示失敗,原因是光線不足、背景太亂、臉的位置不對等等……過程讓人崩潰,結(jié)果也不盡如人意。一項名為 Avatar SDK 的技術(shù)或許可以成為廣大掃臉失敗患者的“福音”。
Avatar SDK 是一項基于智能手機的高級 3D 掃描技術(shù),由美國公司 itSeez3D 研發(fā),可以將用戶的單張自拍照轉(zhuǎn)換成逼真的 3D 形象。網(wǎng)頁版 Avatar SDK 已上架。該技術(shù)的 beta 版本是免費的,beta 結(jié)束后用戶需花費 50 美元/月的訂閱費,可以創(chuàng)建 1000 個虛擬形象,額外虛擬形象為 0.05 美元/個。
itSeez3D 實驗室的首席執(zhí)行官 Victor Erukhimov 表示:“目前大多數(shù) 3D 掃描軟件的解決方案都是通過深度感應(yīng)相機來創(chuàng)建 3D 模型,而 itSeez3D 完全不需要深度傳感器,只要通過智能手機的攝像頭和一張照片,就可以創(chuàng)建高質(zhì)量的 3D 臉部模型。用戶可以在許多應(yīng)用中看到和自己幾乎一樣的 3D 數(shù)字人像,包括社交 VR、游戲、時尚和零售領(lǐng)域等。這種個性化的 3D 虛擬形象可以給用戶在 VR 環(huán)境中帶來更好的沉浸感和交互體驗。”
itSeez3D 總部位于硅谷,研發(fā)部門在俄羅斯,其母公司是 Itseez,主要研發(fā)類似 OpenCV 的計算機視覺算法。這類計算機視覺算法在工業(yè)領(lǐng)域有廣泛的應(yīng)用,如礦山檢測等。英特爾去年收購了 itseez,itSeez3D 也從 Itseez 剝離出來,開發(fā)了這種面部掃描解決方案。
電子游戲可能是 itSeez3D 技術(shù)最基礎(chǔ)的應(yīng)用,但Victor Erukhimov 也表示,該項技術(shù)還可用于在 VR 空間中創(chuàng)建會議室。目前英特爾已經(jīng)將 Itseez 的技術(shù)應(yīng)用于自動駕駛汽車、數(shù)字安全和監(jiān)控、工業(yè)檢測等項目中,itSeez3D 與這些項目也有很多合作。
VR 本身可以給用戶帶來較好的沉浸式體驗,但想要吸引用戶持續(xù)投入,就需要一個更好的 Avatar 呈現(xiàn)方案。目前有許多公司都在進行這方面的研發(fā),也提出了一些解決方案。
卡通化的人形 avatar 制作成本較低,應(yīng)用范圍也比較廣,是目前相對主流的技術(shù)趨勢,vTime 等公司采用的就是卡通人形 avatar 方案;CapturingReality 開發(fā)出了一整套名為 RealityCapture 的捕捉、還原 3D 模型的技術(shù),用戶從不同角度拍攝同一個物體,并導(dǎo)入軟件中,軟件會初步生成可用的 3D 模型。
人物建模除建模本身外,還要考慮人物表情等諸多動態(tài)交互的因素。itSeez3D 的技術(shù)采用了 AI 算法,能預(yù)測臉部、頭部的形狀和質(zhì)地,鼻子的長度,嘴唇、臉頰的形狀等。這種解決方案可能沒有深度傳感器測量出來的精準(zhǔn),但是速度快,操作也相對簡便,或許會有更廣闊的應(yīng)用前景。