iPhone X 上市后,相信不少用戶(hù)已經(jīng)在朋友圈曬過(guò)一輪“獨(dú)家定制”的Animoji了。雷鋒網(wǎng)曾發(fā)文《蘋(píng)果Animoji表情背后:面部識(shí)別技術(shù)如何一步步進(jìn)化的?》,文中講到,面部動(dòng)作識(shí)別和追蹤原本常用于電影拍攝中,如大家最熟悉的《阿凡達(dá)》,隨后通過(guò)機(jī)器學(xué)習(xí),用大量表情訓(xùn)練算法,來(lái)創(chuàng)建3D模型,直到今天,蘋(píng)果將其融入到手機(jī)中。
那么,如果把iPhone X的前置攝像頭看作是一個(gè)面部捕捉系統(tǒng),它捕捉的面部表情數(shù)據(jù)能被用在游戲的虛擬角色中嗎?雷鋒網(wǎng)了解到,一個(gè)月前,Kite & Lightning游戲工作室的創(chuàng)始人Cory Strassburger進(jìn)行了一項(xiàng)大膽的嘗試:將iPhone X捕捉到的面部表情,植入Maya軟件中,從而為虛擬動(dòng)畫(huà)形象快速配上表情。
說(shuō)起Kite & Lightning,想必一些 VR 愛(ài)好者并不陌生。這家游戲工作室去年發(fā)布了一款沉浸時(shí)迷你歌劇《Senza Peso》,其中也使用到了眼部追蹤技術(shù)。同時(shí),他們還開(kāi)發(fā)了一款名為《Beblon Battle Royle》的 VR 游戲。
對(duì)于此次大膽的嘗試,Cory想看看,能否通過(guò)iPhone X的面部捕捉系統(tǒng),可快速、便捷地為游戲中的人物加入個(gè)性化色彩。
經(jīng)過(guò)一番試驗(yàn)后,“我目前的結(jié)論是,iPhone X 生成的面部數(shù)據(jù)精細(xì)程度令人震驚,而且數(shù)據(jù)穩(wěn)定,屬于正常運(yùn)行。它能精準(zhǔn)地步捕捉到非常細(xì)微的動(dòng)作,甚至是很小幅度的抽動(dòng),數(shù)據(jù)完全可以使用。”
Cory認(rèn)為,這代表一種相對(duì)較便宜的面部捕捉方式。同時(shí),手機(jī)移動(dòng)端的形式更容易設(shè)置,以及對(duì)面部捕捉實(shí)現(xiàn)應(yīng)用??雌饋?lái),蘋(píng)果此前所收購(gòu)的Faceshift公司,為此貢獻(xiàn)了很大的功勞。盡管,Cory也注意到,F(xiàn)aceshift 原本的解決方案擁有其他很酷的功能,但iPhone X收集的面部表情數(shù)據(jù)已經(jīng)足夠使用。
此外,他還公布了自己在Maya中是如何操作的:
在Unity中導(dǎo)入《Beblon Battle Royle》的一個(gè)游戲角色,并將ARKit輸出的面部捕捉數(shù)據(jù)混入該角色中。
為了將表情數(shù)據(jù)導(dǎo)入Maya,增加記錄功能,將面部表情數(shù)據(jù)錄入一個(gè)文檔,本地保存在iPhone上。每次開(kāi)始和停止都會(huì)在手機(jī)中生成獨(dú)立的文檔,并且重新命名。
從iPhone X中復(fù)制這些文檔,通過(guò)USB傳輸?shù)阶烂妗?/p>
為了將面部數(shù)據(jù)導(dǎo)入Maya,需要重新格式化,于是我重開(kāi)發(fā)了一款桌面應(yīng)用,格式化數(shù)據(jù),將數(shù)據(jù)轉(zhuǎn)化為Maya.anim 文檔。
把這些文檔導(dǎo)入Maya和游戲角色中,你在手機(jī)上呈現(xiàn)的表情,便出現(xiàn)在游戲角色上了。
不過(guò),過(guò)程中在數(shù)據(jù)方面還是出現(xiàn)了一些小問(wèn)題,他認(rèn)為可能是代碼的問(wèn)題。同時(shí),由于面部表情捕捉時(shí)的刷新率為每秒60幀,而導(dǎo)入到Maya中,刷新率為每秒30幀,這導(dǎo)致效果有些打折扣。
他認(rèn)為,“iPhone X的TrueDepth系統(tǒng)最厲害的地方在于,其表情捕捉簡(jiǎn)單,而且快捷,然后可以了里面將數(shù)據(jù)導(dǎo)入游戲引擎中。手機(jī)捕捉的數(shù)據(jù)完全可以使用。”
雷鋒網(wǎng)了解到,這次嘗試成功后,下一步,Cory想把iPhone X放在頭盔上,然后使用Xsens動(dòng)作捕捉系統(tǒng)同時(shí)實(shí)現(xiàn)身體和面部的動(dòng)作捕捉。
他說(shuō),“對(duì)下一步的嘗試,我非常有信心。通過(guò)加入動(dòng)作捕捉數(shù)據(jù),游戲人物將會(huì)有很大的提升,我還會(huì)加入帶有皺紋的皮膚,與對(duì)應(yīng)的表情相混合,這會(huì)使動(dòng)畫(huà)人物更鮮活。”
責(zé)任編輯:端焰
特別聲明:本網(wǎng)登載內(nèi)容出于更直觀(guān)傳遞信息之目的。該內(nèi)容版權(quán)歸原作者所有,并不代表本網(wǎng)贊同其觀(guān)點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)。如該內(nèi)容涉及任何第三方合法權(quán)利,請(qǐng)及時(shí)與ts@hxnews.com聯(lián)系或者請(qǐng)點(diǎn)擊右側(cè)投訴按鈕,我們會(huì)及時(shí)反饋并處理完畢。
- 編輯推薦:iPhone X里最好的十個(gè)常用應(yīng)用2017-12-13
- 曾經(jīng)的多彩iPhone又回來(lái)了?而且還帶了全面屏2017-12-11
- iPhone X中國(guó)銷(xiāo)量喜人 蘋(píng)果公司CEO蒂姆·庫(kù)克:我非常滿(mǎn)意2017-12-07
- iphone se2最新消息!iPhone SE 2全面屏金屬機(jī)身,配置良心2017-12-06
- iPhone SE 2 將在2018年4月上市,售價(jià)和一代相同保持不變2017-12-06
- 黑屏重啟修復(fù)了?然而iPhone X又曝出了新BUG2017-12-03
- iPhone X升iOS 11.2正式版后Face ID廢柴:需重啟解決2017-12-03
- iPhone 8/X要被禁售是真的嗎?這原因蘋(píng)果崩潰2017-12-01
- 蘋(píng)果首席設(shè)計(jì)官:我們一直渴望iPhone X的全玻璃設(shè)計(jì)2017-11-30
- iPhone X Plus“現(xiàn)身” 6.5英寸機(jī)身卻與8P相當(dāng)2017-11-29
已有0人發(fā)表了評(píng)論