適用于 iClone 的 AccuFACE 插件是一款由 NVIDIA RTX GPU 提供支持的 AI 面部追蹤器，能夠從網(wǎng)絡(luò)攝像頭和傳統(tǒng)視頻文件中捕捉面部表情。 除了在適當(dāng)?shù)恼彰鳁l件下具有出色的準(zhǔn)確性和響應(yīng)能力外，AccuFACE 還可以將面部動作與語音輸入平滑同步。 它還使用專有的 AccuLIPS 技術(shù)微調(diào)嘴唇和舌頭的關(guān)節(jié)。 其時間碼匹配還確保了精確的全幀動畫錄制，這對于專業(yè)制作和工業(yè)應(yīng)用至關(guān)重要。

 

實(shí)時面部追蹤

AccuFACE 與獨(dú)立的 USB 網(wǎng)絡(luò)攝像頭或配備集成網(wǎng)絡(luò)攝像頭的筆記本電腦兼容，以每秒 30 幀的速度提供 720p 的最佳跟蹤分辨率。使用頭盔式設(shè)置調(diào)整視頻方向的功能可確保穩(wěn)定的面部捕捉以及并發(fā)的身體和手部跟蹤。

 

獨(dú)立視頻檢測

放棄與特殊動作捕捉設(shè)備相關(guān)的高成本，選擇消費(fèi)級相機(jī)或普通手機(jī)來創(chuàng)建您的素材。對于缺乏原始源材料的動畫師來說，總是有強(qiáng)大的選擇來改編來自 YouTube、Instagram 等平臺的現(xiàn)有視頻。

 

支持遠(yuǎn)程協(xié)作

從標(biāo)準(zhǔn)錄制的視頻中準(zhǔn)確跟蹤面部標(biāo)志著革命性的飛躍。借助此功能，AccuFACE 使制作工作室能夠與世界各地的專業(yè)演員或配音人才無縫協(xié)作，將動畫生產(chǎn)力從設(shè)備依賴和時間或地點(diǎn)的限制中解放出來。

 

校準(zhǔn)精度和個性化

 

優(yōu)化 Expressive Range

為面部建立一個中性狀態(tài)，作為各種表情的基線。對眉毛運(yùn)動的進(jìn)一步校準(zhǔn)可以提供單個演員的真實(shí)性及其獨(dú)特的表演。

 

通過易于遵循的指導(dǎo)流程定制角色的面部設(shè)置以匹配現(xiàn)場表演者，并立即接收動畫反饋以進(jìn)行徹底優(yōu)化。

當(dāng)從單個視頻源獲得理想的校準(zhǔn)姿勢被證明具有挑戰(zhàn)性時，AccuFACE 提供了在多個視頻文件中搜索校準(zhǔn)幀的靈活性。

 

隨著動畫師繼續(xù)努力解決各種小缺陷，包括噪音、抽搐、干擾和失火，完美的面部捕捉技術(shù)仍然難以捉摸。AccuFACE 提供了一個全面的工具包來解決這些常見挑戰(zhàn)，使藝術(shù)家離實(shí)現(xiàn)完美的動畫更近了幾步。

強(qiáng)度平衡

增強(qiáng)或調(diào)制某些面部區(qū)域的運(yùn)動，以捕捉更真實(shí)的表演或超越到另一種動畫風(fēng)格。

平滑過濾器

消除由于超過跟蹤角度、過度覆蓋頭發(fā)或不均勻的照明和陰影而導(dǎo)致的跟蹤數(shù)據(jù)中不需要的痙攣。

 

降噪

抖動會困擾所有級別的運(yùn)動跟蹤。AccuFACE Denoise 可以有效地消除不穩(wěn)定的運(yùn)動，而不會影響性能的廣度。

抗干擾

跨區(qū)域干擾和交叉觸發(fā)會導(dǎo)致 expression 混濁。AccuFACE 干擾消除可以減少不必要的頭部、眉毛和嘴巴運(yùn)動。

 

精確音頻匹配

 

單通道音頻同步

與需要單獨(dú)音頻對齊才能完全同步語音和表演的面部動捕解決方案不同，AccuFACE 可以在一次通過中捕獲音頻數(shù)據(jù)和面部動畫。這允許快速生成語音同步動畫，無論是來自實(shí)時網(wǎng)絡(luò)攝像頭還是預(yù)先錄制的視頻。

無論源媒體幀率設(shè)置為 24 fps、30 fps 還是 60 fps，AccuFACE 引擎都將根據(jù)源幀率始終生成音頻同步動畫。

 

AccuLIPS 可實(shí)現(xiàn)其他面部動捕系統(tǒng)無法實(shí)現(xiàn)的復(fù)雜嘴唇和舌頭運(yùn)動。通過從語音中提取文本數(shù)據(jù)，AccuLIPS 會生成一個額外的發(fā)音嘴型軌道，以實(shí)現(xiàn)精確的口型同步。要完全控制面部動捕的細(xì)微之處，請利用 iClone 的面部摳像編輯器、面部圖層和曲線編輯器。

 

多語言支持

通過巧妙地繞過語音到文本識別，AccuLIPS 可以將其功能擴(kuò)展到英語以外的其他語言。可以使用額外的文本腳本進(jìn)一步提高唇形檢測和準(zhǔn)確性，同時可以使用免費(fèi)工具將非英語音頻文件轉(zhuǎn)換為羅馬化的對應(yīng)文件。

 

用于無損錄制的時間碼同步

根據(jù)所選的網(wǎng)絡(luò)攝像頭或錄制的視頻幀速率，時間碼匹配可確保全幀錄制，而與計(jì)算機(jī)的規(guī)格和性能無關(guān)。

 

AI 驅(qū)動的運(yùn)動跟蹤技術(shù)