快速解答

清理身體追蹤數據需要三個階段:捕捉預防(良好的光線、適當的構圖、合身的衣物)、內建修正(追蹤過程中的防穿透求解),以及捕捉後清理(抖動濾波、腳部接觸鎖定、間隙插值)。像 QuickMagic 這樣的 AI 動作捕捉工具在求解時會自動應用穿透修正追蹤,但大多數專案在最終重新定向之前,仍然需要在 Blender、MotionBuilder 或 Maya 中進行一次輕量清理。最大的成效來自於早期修復自體穿透、應用 6-8 Hz 的時域平滑化,以及在支撐階段鎖定腳部接觸。

是什麼導致了髒的身體追蹤數據?

任何系統(無論是光學式、慣性感測式或基於 AI)的原始身體追蹤數據都會含有偽影。這些偽影分為五大類。了解哪些影響您的鏡頭是任何身體追蹤清理工作流程的第一步。

抖動

關節位置和旋轉的高頻噪聲。肢體看似震動或顫抖。由逐幀預測誤差、低解析度、運動模糊和不良光線造成。

自體穿透

身體部位不真實地交錯,例如手臂穿過軀幹或手部穿過腿部。當求解器缺乏碰撞感知或關節限制時發生。

腳部滑動

在接觸階段腳部在地板上滑動而非保持固定。由根運動漂移、不準確的地面偵測或攝影機運動補償造成。

運動跳躍

相鄰幀之間關節位置突然跳躍。通常由遮蔽恢復造成,追蹤器失去肢體後在可見度恢復時將其猛然拉回。

缺失幀

動畫數據中完全無法追蹤的間隙。常見於快速運動、嚴重遮蔽或主體部分離開畫面時。

為什麼 AI 動作捕捉更容易出現某些偽影

無標記式 AI 身體追蹤從 2D 影片幀預測 3D 關節位置。與實際追蹤反光標記的光學系統不同,AI 系統從像素數據推斷姿勢。這使其特別容易產生抖動(因為每個幀是獨立預測的)和自體穿透(因為 2D 到 3D 提升過程並未強制實施物理碰撞約束)。然而,現代的 AI 動作捕捉平台通過內建的防穿透求解器和時域平滑化來解決這些問題,在數據到達 3D 軟體之前顯著減少偽影。

身體追蹤清理:逐步工作流程

以下工作流程適用於任何動作捕捉數據源,無論您使用的是 QuickMagic、DeepMotion、Rokoko Vision 還是來自光學系統的原始數據。目標是以最少的手動關鍵幀操作獲得乾淨的動作捕捉數據。

1

評估原始數據

在進行任何操作之前,以全速和 25% 速度播放動畫。記錄您看到的特定偽影:抖動出現在何處(通常是手和腳等末端)?穿透發生在哪裡(通常是手臂交叉軀幹)?腳部滑動發生在哪裡(通常在走路或跑步循環中)?這項評估確定實際需要哪些清理步驟。並非每個片段都需要所有五個步驟。

Blender:Dope Sheet MotionBuilder:Story Mode
2

首先修復穿透問題

應在其他修復之前應用穿透修正追蹤,因為平滑化和插值實際上可能使交集擴大(如果它們將肢體拉得更近)。如果您的捕捉工具具有內建防穿透功能(QuickMagic 有),請確保在匯出前啟用它。如果您在後期清理,處理方法取決於嚴重程度:

  • 輕微穿透(肢體輕微穿插):應用關節限制約束,將旋轉限制在生物力學有效範圍內。大多數綁定系統原生支援此功能。
  • 中度穿透(可見交集):使用碰撞感知求解器。在 MotionBuilder 中,繪製到 Control Rig 並在最嚴重的幀上手動將效應器拖離身體,然後在附加層上設定關鍵幀進行修正。在 Blender 中,使用帶有 IK 約束的 Pose Mode 將肢體推開。
  • 嚴重穿透(肢體深陷嵌入):這些幀可能在捕捉期間有嚴重遮蔽。考慮以更好的攝影機角度重新捕捉該片段,或使用基於 AI 的清理工具從周圍幀預測正確姿勢。
QuickMagic:內建防穿透 MotionBuilder:Control Rig + IK Blender:Pose Mode + 約束
3

減少抖動和高頻噪聲

抖動是 AI 動作捕捉數據中最常見的偽影。關鍵原則:平滑到足以去除噪聲,但不要過度以致失去有意的運動細節。過度平滑會使動畫看起來飄浮且機械化。

  • 6-8 Hz 巴特沃斯低通濾波器: 動作捕捉降噪的行業標準。在 MotionBuilder 中,選取所有關節並以 7 Hz 截止頻率執行巴特沃斯濾波器。這會去除高頻抖動,同時保留有意識的動作。
  • Blender 中的 Smooth Keys: 打開 Graph Editor,選取所有關鍵幀,然後使用 Key > Smooth Keys (Shift+O)。對中等噪聲應用 2-3 次迭代。對於嚴重抖動,為 F 曲線添加 Smooth modifier。
  • Decimate 減少關鍵幀: 平滑化後,使用 Decimate 降低關鍵幀密度。AI 動作捕捉通常每幀產生一個關鍵幀,平滑化後這不再必要。0.3-0.5 的比例通常能保留動作品質,同時使檔案更容易編輯。
MotionBuilder:Butterworth 7 Hz Blender:Smooth Keys + Decimate Maya:Butterworth Filter
4

修復腳部滑動和地面接觸

腳部滑動是觀眾最明顯的偽影,即使非動畫師也能注意到。修復方法涉及識別接觸階段並在那些幀期間鎖定腳部位置。

在 MotionBuilder 中: 在腳上建立一個輔助效應器。移動到每個接觸階段的起點,固定效應器位置,並將接觸期間的 reach influence 設為 100%,擺動期間設為 0%。使用 FCurves 視窗平滑化固定與未固定狀態之間的過渡。

在 Blender 中: 在 Graph Editor 中通過尋找腳骨的低速度來識別接觸幀。在那些幀期間展平位置曲線。或者,先將動作捕捉烘焙到 FK 骨骼上,然後添加 IK 約束以在接觸期間保持腳部位置。

預防技巧: 如果您使用 QuickMagic 進行捕捉,對於移動片段請使用靜態攝影機模式。移動攝影機鏡頭會引入根運動補償,可能加劇腳部滑動。

MotionBuilder:Aux Effector + Reach Blender:IK Foot Lock
5

填補間隙並平滑過渡

缺失幀和運動跳躍會造成破壞沉浸感的不連續。對於短間隙(1-5 幀),線性或樣條插值通常足夠。對於較長的間隙,使用基於周圍運動上下文的預測重構。大多數 3D 軟體在您刪除損壞的關鍵幀並讓插值填充時會自動處理短間隙。對於運動跳躍(突然跳動),選取有問題的幀,刪除它們,然後讓插值平滑過渡。如果跳躍是由遮蔽恢復引起,請檢查您的捕捉工具是否提供遮蔽處理模式,在盲點期間預測肢體位置。

穿透修正追蹤:它是如何運作的

穿透修正追蹤是檢測和解決 3D 身體運動數據中自體碰撞的過程。這是身體追蹤清理中技術要求最高的方面之一,因為它要求系統不僅了解關節的位置,還要了解每個身體部位佔據的體積以及這些體積是否相交。

三種穿透修正方法

方法運作方式優勢限制
關節限制強制將關節旋轉限制在生物力學有效範圍內,防止會導致穿透的姿勢快速、即時、無計算負擔無法解決由平移誤差引起的穿透;僅解決基於旋轉的碰撞
碰撞感知優化從身體部位體積建立碰撞模型並沿表面法線將相交部分推開解決可見交集;對平移誤差有效計算成本高;如果修正過於激進可能引入運動跳躍
物理資訊驅動的 AI在物理有效的運動數據上訓練神經網絡,使模型在推理期間懲罰幾何上不可能的姿勢在穿透發生前防止它;保留自然運動流暢性需要訓練數據;可能無法應對新穎的邊緣案例

QuickMagic 內建防穿透

QuickMagic 在求解階段應用穿透修正,然後才匯出動畫數據。當您上傳影片時,AI 首先逐幀估算 3D 關節位置,然後運行一個後求解步驟,強制實施關節限制並解決檢測到的自體碰撞。這意味著您匯出的 FBX、BVH 或 BIP 檔案與原始的逐幀預測相比,已經減少了穿透偽影。對於大多數舞蹈、運動和表演鏡頭,內建修正足以獲得乾淨的預覽。複雜的互動(例如戰鬥翻滾、緊密纏鬥或多主體接觸)可能仍需要後期手動清理。

何時內建防穿透就足夠了:

  • 標準移動:走路、跑步、跳躍
  • 舞蹈和表演捕捉
  • 上半身手勢和 VTubing 內容
  • 沒有劇烈身體接觸的運動片段
  • 攝影機構圖清晰的單一主體捕捉

何時需要手動穿透清理:

  • 具有持續身體接觸的戰鬥或纏鬥場景
  • 主體間肢體交叉的多主體互動
  • 具有嚴重自體遮蔽的坐姿或地板動作
  • 構圖不佳導致顯著追蹤錯誤的片段
  • 需要網格級別碰撞解析的高保真數位雙胞胎工作

比較:捕捉時與捕捉後清理

最高效的身體追蹤清理策略取決於您何時應用修正。有些修正在捕捉時處理最好,而其他需要在 3D 軟體中進行後期處理。

偽影捕捉時修復捕捉後修復建議優先級
抖動更好的光線、更高解析度、更慢的動作巴特沃斯濾波器、Smooth Keys、時域平滑化捕捉後(平滑化可靠且快速)
穿透內建防穿透求解器(QuickMagic)Control Rig IK、碰撞感知優化、手動關鍵幀捕捉時優先,殘留問題再用捕捉後
腳部滑動靜態攝影機、全身構圖、平坦地面IK 腳部鎖定、輔助效應器、接觸夾持捕捉後(需要幀準確的接觸檢測)
運動跳躍避免遮蔽、保持主體完全在畫面內刪除壞幀、插值、預測重構捕捉後(需要手動選擇幀)
缺失幀確保連續可見、使用多攝影機角度樣條插值、基於 AI 的間隙填補捕捉後(短間隙容易,長間隙需要 AI 工具)

乾淨動作捕捉數據的工具:比較

不同的工具專注於身體追蹤清理的不同方面。以下是常用選項在產生乾淨動作捕捉數據方面的比較。

工具防穿透抖動濾波器腳部鎖定最適合
QuickMagic內建、自動匯出時時域平滑化靜態攝影機模式減少滑動一次完成捕捉與初步清理
MotionBuilderControl Rig + 手動 IK巴特沃斯濾波器(預設 7 Hz)帶 reach influence 的輔助效應器專業工作室清理流程
BlenderPose Mode + 約束Smooth Keys、F 曲線修改器IK 約束、手動關鍵幀獨立和小型工作室工作流程
MayaHumanIK + 自訂約束巴特沃斯、減少關鍵幀IK Handle + 腳部鎖定電影長片和 AAA 遊戲流程
Cascadeur基於物理的自動擺姿勢內建平滑化自動接觸檢測物理準確的動畫清理

對大多數創作者而言,最有效的工作流程是使用具有內建防穿透功能的工具(如 QuickMagic)進行捕捉,然後在 Blender 或 MotionBuilder 中進行一次輕量的抖動和腳部滑動清理。這能減少手動工作量,同時仍能產出可用於生產的數據。

捕捉時的最佳實踐以獲得乾淨數據

最有效的身體追蹤清理是你不需要進行的清理。以下捕捉實踐能大幅減少您之後需要修復的偽影。

光線

在均勻、擴散的光線下拍攝。避免強烈陰影和強烈背光。AI 需要清晰地看到身體輪廓才能準確預測關節位置。

攝影機角度

將攝影機放置在腰部高度,距離主體 3-5 米,將全身納入畫面,留出頭頂和腳底空間。避免造成深度模糊的極端角度。

衣物

穿著合身衣物。寬鬆布料會遮蔽肢體位置,是造成穿透偽影的主要原因,因為求解器無法確定實際身體表面在哪裡。

背景

使用乾淨、不雜亂的背景。複雜背景可能會混淆主體分割,導致追蹤錯誤和運動跳躍。

遮蔽

盡量減少肢體在軀幹前或彼此交叉的時刻。當遮蔽無法避免時,放慢動作速度以給追蹤器更多幀來處理。

幀率

盡可能以 60 FPS 捕捉。更高的幀率為 AI 提供更多時域上下文,減少抖動並使間隙插值更平滑。以目標幀率(24 或 30 FPS)匯出。

應避免的常見清理錯誤

浪費時間或降低品質的錯誤:

  • 過度平滑: 對所有關節應用激進平滑會去除讓表演感覺鮮活的有意識微小動作。末端的平滑度應比核心關節更高。
  • 在檢查內建修正之前進行清理: 如果您的捕捉工具已經應用了防穿透,在後期再運行另一個碰撞步驟可能會引入偽影。務必先檢查原始匯出結果。
  • 在修復穿透之前修復腳部滑動: 如果在解決穿透之前鎖定腳部,鎖定的位置可能與修正後的肢體位置衝突,產生新的滑動。
  • 在清理之前進行重新定向: 演員與角色之間的比例差異會引入新的偽影。務必先在源骨架上進行清理。
  • 忽略根運動: 許多抖動問題源自帶噪聲的根(髖部)平移,它會傳播到所有子關節。先平滑根,然後再處理末端。
  • 不使用動畫層: 始終在附加層或覆蓋層上應用清理修正,這樣您可以與原始版本進行比較,必要時回退。

身體追蹤清理的未來:AI 驅動的解決方案

身體追蹤清理正越來越多地被 AI 自動化。最近在 SIGGRAPH Asia 2025 發表的研究表明,擴散模型可以在未成對的損壞動作捕捉數據上進行訓練,以自動識別和修復偽影。由西蒙弗雷澤大學和 Electronic Arts 研究人員開發的 StableMotion 專案,在一個 245 小時的足球動作捕捉數據集上訓練了清理模型,實現了運動跳躍減少 68%、凍結幀減少 81%。

這些 AI 方法通過學習自然人類運動的統計模式,並懲罰偏離這些模式的輸出。與應用統一平滑化的傳統濾波器不同,基於 AI 的清理可以區分有意義的微小運動和不想要的偽影,在去除噪聲的同時保留表演的細微差別。隨著這些模型成熟,捕捉與清理之間的界線將持續模糊,像 QuickMagic 這樣的工具已將防穿透和時域平滑化直接整合到捕捉流程中。

這對您的工作流程意味著什麼

如果您使用現代的 AI 動作捕捉工具,預計未來 12-18 個月內需要手動清理的工作量將顯著減少