クイックアンサー

クリーンなボディトラッキングデータを得るには、キャプチャ時の予防（良好な照明、適切なフレーミング、体にフィットした服装）、内蔵補正（トラッキング中の貫通防止ソルブ）、およびキャプチャ後のクリーンアップ（ジッター除去、足接地ロック、ギャップ補間）という3つの段階が必要です。QuickMagicのようなAIモーションキャプチャツールはソルブ中に自動的に貫通補正トラッキングを適用しますが、ほとんどのプロジェクトでは、最終的なリターゲティングの前にBlender、MotionBuilder、Mayaで軽いクリーンアップパスを実行することが有益です。最大の効果が得られるのは、自己貫通を早期に修正し、6〜8Hzで時間的スムージングを適用し、接地フェーズ中に足のコンタクトをロックすることです。

ボディトラッキングデータが汚れる原因とは？

光学式、慣性式、AIベースを問わず、あらゆるシステムからの生のボディトラッキングデータにはアーティファクトが含まれます。これらのアーティファクトは5つのカテゴリに分類されます。どのアーティファクトが映像に影響しているかを理解することが、ボディトラッキングのクリーンアップワークフローの第一歩です。

ジッター

関節の位置と回転における高周波ノイズ。手足が震えたり振動しているように見える。フレームごとの予測誤差、低解像度、モーションブラー、照明不足が原因。

自己貫通

腕が胴体を貫通したり、手が脚に食い込むなど、体の部位が非現実的に交差する。ソルバーに衝突認識や関節限界が欠如している場合に発生。

足滑り

接地フェーズ中に足が床に固定されずに滑ってしまう。ルートモーションのドリフト、不正確な地面検出、カメラ移動の補償が原因。

モーションポップ

隣接フレーム間で関節位置が突然跳ね上がる。通常はオクルージョン回復が原因で、トラッカーが肢を見失い、再表示されたときに元の位置にスナップバックする。

フレーム欠落

トラッキングが完全に失敗したアニメーションデータのギャップ。高速動作、重度のオクルージョン、または被写体がカメラフレームから部分的にはみ出した場合によく発生。

AIモーションキャプチャが特定のアーティファクトを起こしやすい理由

マーカーレスAIボディトラッキングは、2Dビデオフレームから3D関節位置を予測します。光学式システムが反射マーカーを物理的に追跡するのに対し、AIシステムはピクセルデータからポーズを推定します。これにより、特にジッター（各フレームが独立して予測されるため）と自己貫通（2D-to-3Dリフティングプロセスが物理的衝突制約を本質的に強制しないため）の影響を受けやすくなります。ただし、最新のAIモーションキャプチャプラットフォームは、データが3Dソフトウェアに届く前にアーティファクトを大幅に低減する内蔵の貫通防止ソルバーと時間的スムージングを備えており、これらの問題に対処しています。

ボディトラッキングクリーンアップ：ステップバイステップのワークフロー

以下のワークフローは、QuickMagic、DeepMotion、Rokoko Vision、または光学式システムからの生データなど、あらゆるモーションキャプチャデータソースに適用できます。目標は、最小限の手動キーフレーミングでクリーンなモーションキャプチャデータを得ることです。

1

生データを評価する

何かに触れる前に、アニメーションをフルスピードと25%スピードで再生します。見られる特定のアーティファクトに注目してください。ジッターはどこで発生するか（通常は手足などの末端）、貫通はどこで発生するか（通常は腕が胴体を横切るとき）、足滑りはどこで発生するか（通常は歩行または走行サイクル中）を確認します。この評価によって、実際に必要なクリーンアップ手順が決まります。すべてのクリップが5つの手順すべてを必要とするわけではありません。

Blender: ドープシート MotionBuilder: ストーリーモード
2

まず貫通問題を修正する

貫通補正トラッキングは他の修正よりも先に適用する必要があります。なぜなら、スムージングと補間は、手足を近づけると交差を実際に増幅させる可能性があるからです。キャプチャツールに内蔵の貫通防止機能（QuickMagicは備えています）がある場合は、エクスポート前に有効にしてください。後処理でクリーンアップする場合、アプローチは深刻度に依存します：

  • 軽度の貫通（手足がわずかに食い込む程度）：関節の回転を生物学的に妥当な範囲に制限するジョイントリミット制約を適用します。ほとんどのリギングシステムはこれをネイティブでサポートしています。
  • 中程度の貫通（目に見える交差）：衝突認識ソルバーを使用します。MotionBuilderでは、コントロールリグにプロットし、最悪のフレームでエフェクターを手動で体の外にドラッグして、加算レイヤーに修正をキー付けします。Blenderでは、IK制約を使用したポーズモードで手足を押し離します。
  • 重度の貫通（手足が深く埋め込まれている）：これらのフレームはキャプチャ中に重度のオクルージョンがあった可能性が高いです。より良いカメラアングルでそのセグメントを再キャプチャするか、周辺フレームから正しいポーズを予測できるAIベースのクリーンアップツールを使用することを検討してください。
QuickMagic: 内蔵貫通防止 MotionBuilder: コントロールリグ + IK Blender: ポーズモード + 制約
3

ジッターと高周波ノイズを低減する

ジッターはAIモーションキャプチャデータで最も一般的なアーティファクトです。重要な原則：ノイズを除去するのに十分なスムージングを行いつつ、意図した動作の詳細を失わないこと。過度のスムージングはアニメーションをふわふわしてロボットのように見せます。

  • 6〜8Hzのバターワースローパスフィルター：モーションキャプチャノイズ低減の業界標準。MotionBuilderでは、すべてのジョイントを選択し、カットオフ7Hzでバターワースフィルターを実行します。これにより高周波のジッターが除去され、意図的な動きは保持されます。
  • Blenderでのスムーズキー：グラフエディターを開き、すべてのキーフレームを選択して、キー > スムーズキー（Shift+O）を使用します。中程度のノイズには2〜3回の反復を適用します。重度のジッターには、Fカーブにスムーズモディファイアを追加します。
  • キーフレーム削減のためのデシメート：スムージング後、デシメートを使用してキーフレーム密度を減らします。AIモーションキャプチャはフレームごとに1キーを生成することが多く、スムージング後は不要です。0.3〜0.5の比率で通常はモーション品質を維持しながら、ファイルの編集が容易になります。
MotionBuilder: バターワース7Hz Blender: スムーズキー + デシメート Maya: バターワースフィルター
4

足滑りと接地コンタクトを修正する

足滑りはアニメーターでなくとも観客が気づく、最も目に見えるアーティファクトです。修正には、接地フェーズを特定し、それらのフレーム中に足の位置をロックすることが含まれます。

MotionBuilderの場合：足に補助エフェクターを作成します。各接地フェーズの開始位置にスクラブし、エフェクター位置をピン留めし、接地中はリーチ影響を100％、スイング中は0％に設定します。Fカーブウィンドウを使用して、ピン留め状態と非ピン留め状態の間の遷移をスムーズにします。

Blenderの場合：グラフエディターで足のボーンの速度が低いフレームを特定します。それらのフレーム中に位置カーブを平坦化します。別の方法として、最初にモーションキャプチャをFKボーンにベイクし、次にIK制約を追加して接地中の足の位置を保持します。

予防のヒント：QuickMagicでキャプチャする場合は、移動クリップに静止カメラモードを使用します。動くカメラ映像はルートモーション補正を導入し、足滑りを増幅させる可能性があります。

MotionBuilder: 補助エフェクター + リーチ Blender: IKフットロック
5

ギャップを埋め、遷移をスムーズにする

フレーム欠落とモーションポップは没入感を壊す不連続性を生み出します。短いギャップ（1〜5フレーム）の場合、線形補間またはスプライン補間で十分です。より長いギャップには、周囲のモーションコンテキストに基づいた予測再構成を使用します。ほとんどの3Dソフトウェアは、破損したキーフレームを削除し、補間で埋めることで短いギャップを自動的に処理します。モーションポップ（突然のジャンプ）の場合、問題のあるフレームを選択して削除し、補間で遷移をスムーズにします。ポップがオクルージョン回復によるものである場合、キャプチャツールが死角での肢の位置を予測するオクルージョン処理モードを提供しているか確認してください。

貫通補正トラッキング：その仕組み

貫通補正トラッキングは、3Dボディモーションデータの自己衝突を検出および解決するプロセスです。これは、関節の位置だけでなく、各体節が占めるボリュームとそれらのボリュームが交差するかどうかをシステムが理解する必要があるため、ボディトラッキングクリーンアップの最も技術的に要求される側面の1つです。

貫通補正の3つのアプローチ

アプローチ仕組み強み制限
関節制限の強制関節の回転を生物学的に妥当な範囲に制限し、貫通を引き起こすポーズを防止高速、リアルタイム、計算オーバーヘッドなし並進誤差による貫通を解決できない；回転ベースの衝突のみを捕捉
衝突認識最適化体節ボリュームから衝突モデルを構築し、交差部分を表面法線に沿って押し離す目に見える交差を解決；並進誤差にも対応計算コストが高い；補正が過剰だとモーションポップを導入する可能性あり
物理情報AI物理的に妥当なモーションデータでニューラルネットワークを訓練し、推論中に幾何学的に不可能なポーズにペナルティを与える貫通が発生する前に防止；自然なモーションフローを維持訓練データが必要；新しいエッジケースを捕捉できない可能性あり

QuickMagic 内蔵の貫通防止機能

QuickMagicは、アニメーションデータをエクスポートする前に、ソルブ段階で貫通補正を適用します。ビデオをアップロードすると、AIはまずフレームごとに3D関節位置を推定し、次に関節制限を強制し検出された自己衝突を解決するポストソルブパスを実行します。これにより、エクスポートされるFBX、BVH、またはBIPファイルは、生のフレームごとの予測と比較して貫通アーティファクトが低減されます。ほとんどのダンス、スポーツ、パフォーマンス映像では、内蔵補正でクリーンなプレビューには十分です。戦闘ロール、密接な格闘、複数被写体の接触などの複雑なインタラクションでは、後処理で手動クリーンアップが必要になる場合があります。

内蔵の貫通防止で十分な場合：

  • 標準的な移動：歩行、走行、跳躍
  • ダンスおよびパフォーマンスキャプチャ
  • 上半身のジェスチャーとVTubingコンテンツ
  • 激しい身体接触のないスポーツクリップ
  • 明確なカメラフレーミングでの単一被写体キャプチャ

手動の貫通クリーンアップが必要な場合：

  • 持続的な身体接触を伴う戦闘または格闘シーン
  • キャラクター間で手足が交差する複数被写体インタラクション
  • 重度の自己オクルージョンを伴う座位または床ベースの動き
  • フレーミングが不十分で大きなトラッキング誤差を引き起こしたクリップ
  • メッシュレベルの衝突解決を必要とする高忠実度デジタルダブル作業

比較：キャプチャ時とキャプチャ後のクリーンアップ

最も効率的なボディトラッキングクリーンアップ戦略は、いつ補正を適用するかによって異なります。一部の修正はキャプチャ時に処理するのが最適ですが、他の修正は3Dソフトウェアでの後処理を必要とします。

アーティファクトキャプチャ時の修正キャプチャ後の修正推奨優先順位
ジッターより良い照明、高解像度、ゆっくりした動作バターワースフィルター、スムーズキー、時間的スムージングキャプチャ後（スムージングは信頼性が高く高速）
貫通内蔵の貫通防止ソルバー（QuickMagic）コントロールリグIK、衝突認識最適化、手動キー付けまずキャプチャ時、残存問題はキャプチャ後
足滑り静止カメラ、全身フレーミング、平らな地面IKフットロック、補助エフェクター、コンタクトクランプキャプチャ後（フレーム正確なコンタクト検出が必要）
モーションポップオクルージョンを避け、被写体を完全にフレーム内に保つ不良フレームを削除、補間、予測再構成キャプチャ後（手動フレーム選択が必要）
フレーム欠落継続的な視認性を確保、複数のカメラアングルを使用スプライン補間、AIベースのギャップ補填キャプチャ後（短いギャップは容易、長いギャップはAIツールが必要）

クリーンなモーションキャプチャデータのためのツール：比較

さまざまなツールがボディトラッキングクリーンアップの異なる側面に特化しています。クリーンなモーションキャプチャデータを生成するための最も一般的なオプションの比較を以下に示します。

ツール貫通防止ジッターフィルターフットロック最適用途
QuickMagic内蔵、自動エクスポート時の時間的スムージング静止カメラモードで滑り軽減1パスでのキャプチャ＋初期クリーンアップ
MotionBuilderコントロールリグ＋手動IKバターワースフィルター（デフォルト7Hz）リーチ影響による補助エフェクタープロフェッショナルスタジオのクリーンアップパイプライン
Blenderポーズモード＋制約スムーズキー、FカーブモディファイアIK制約、手動キー付けインディーおよび小規模スタジオのワークフロー
MayaHumanIK＋カスタム制約バターワース、キー削減IKハンドル＋フットロック長編映画およびAAAゲームパイプライン
Cascadeur物理ベース自動ポーザー内蔵スムージング自動コンタクト検出物理正確なアニメーションクリーンアップ

ほとんどのクリエイターにとって、最も効率的なワークフローは、内蔵の貫通防止機能を備えたツール（QuickMagicなど）でキャプ