iPhone X/XS/XS Max 內置有 TrueDepth 3D 攝影鏡頭，很多人會以為它只能用作 Face ID 為手機解鎖，其實全球廠商已為這個獨特鏡頭開發各個領域的應用程式。一家台灣科技公司就研發利用全新 iPhone 所搭載的 TrueDepth 鏡頭，配合 2D 動畫創作軟件，讓不同程度的使用者花最少時間創製出動態漫畫人物的影片，iPhone 辨識到的臉部表情，可實時反映到動畫角色甚至成為 YouTube 上的 Vtuber 虛擬主播，大大節省以往要描繪動畫人物的時間，以更短時間、更低成本製作高水平的動畫影片。
今次 unwire 小編得到 Apple 的協助，來到台灣採訪 CrazyTalk Animator 軟件的開發公司 Reallusion Inc. 甲尚科技。他們自行研發 2D 與 3D 即時動畫工具，獲得荷里活的電影工作室、大型遊戲製作公司，以及 YouTuber 等採用。旗艦軟件 CrazyTalk Animator（下稱CTA）如今正式支援 iPhone X/XS/XS Max 等內置有 TureDepth 鏡頭的智能手機，只要將手機連接電腦，軟件的 Zero Pose 設計功能能通過 iPhone 辨識人臉各部份的肌肉移動、臉部角度偏移等等，只需一鍵就能準確地進行臉部追蹤，反映到電腦上的 2D 動畫人物之上。
▲台灣塗鴉藝術家 Bounce 示範利用 iPhone XS 把自己的臉部表情轉換成 2D 動畫角色的表情
用戶只要使用 CrazyTalk Animator 3 的 iPhone 臉部動態捕捉功能，再下載搭配專用「LIVE FACE」APP 連接 WiFi，就可透過 TrueDepth 相機為 2D 動畫角色進行臉部動態捕捉，你的表情會實時反映到人物上，藉此輕鬆製作 YouTube、Facebook 或 Twitch 直播節目。
CTA 能夠自動為正面的角色或其他角度的角色選擇合適的臉型，並針對 Sprite 型與變形型（照片辨識）兩種主要模式改善臉部動態捕捉。這個工具可用作形象推廣的人物，亦可做 Vtuber 虛擬主播，重點是容易上手，很快就可設定好自己的動畫人物。
▲透過 iPhone 的人臉辨識功能，可偵測真人的眼晴、眉毛、口部、鼻子、臉部肌肉等移動與角度偏移，反映到 2D 動畫人物之上
▲iPhone 3D 相機檢測到的臉部變化會化作數值，改變動畫人物的臉部表情
小編採訪當日，台灣眾多 YouTube 直播者與藝術工作者，包括 BOUNCE、大陰盜百貨、安傑貓，以及文化人、教育工作者 NiNi 謝昊霓都有到場為記者介紹 CrazyTalk Animator 的用法。他們表示以往為一個單元的動畫製作動畫人物，需要 1 至 2 小時製作時間，現在可大幅縮減到約 10 分鐘。用動畫來做教學、LINE 貼圖，製作流程更簡單。以往冗長的創作時間，可能會錯過內容的最佳出街機會，如今有了這個新工具除了方便以外，更可隨處工作，加大了創作的可能性。
現時任何用戶都可到 CrazyTalk Animator 的官方網站下載免費試用版，再配合 iOS 平台的「LIVE FACE」App，就可嘗試上面介紹以精確人臉辨識反映到 2D 人物的效果。與主流直播工具如 OBS、Xsplit 或 FFSplit 配合使用更可在 Twitch、YouTube 等平台上加疊虛擬角色進行實時直播。
官方網站：https://www.reallusion.com/tw/crazytalk-animator/default.html
試用版下載：https://www.reallusion.com/tw/crazytalk-animator/download.html
LIVE FACE（iOS）下載：https://itunes.apple.com/app/live-face/id1357551209
Leave a Comment