빠른 답변

깨끗한 신체 트래킹 데이터를 얻으려면 세 단계가 필요합니다: 캡처 방지(적절한 조명, 올바른 프레이밍, 몸에 맞는 옷), 내장 보정(트래킹 중 관통 해결), 캡처 후 정리(떨림 필터링, 발 접촉 고정, 간격 보간). QuickMagic와 같은 AI 모캡 도구는 솔브 중에 관통 보정 트래킹을 자동으로 적용하지만, 대부분의 프로젝트는 최종 리타겟팅 전에 Blender, MotionBuilder 또는 Maya에서 가벼운 정리 작업을 거치는 것이 좋습니다. 가장 큰 효과는 초기에 자체 관통을 수정하고, 6-8 Hz에서 시간적 평활화를 적용하며, 지지 단계에서 발 접촉을 고정하는 것입니다.

더티 바디 트래킹 데이터의 원인

모든 시스템(광학, 관성, AI 기반)의 원시 바디 트래킹 데이터에는 아티팩트가 포함됩니다. 이러한 아티팩트는 다섯 가지 범주로 나뉩니다. 어떤 것이 당신의 영상에 영향을 미치는지 이해하는 것이 모든 바디 트래킹 정리 워크플로의 첫 단계입니다.

떨림(Jitter)

관절 위치와 회전의 고주파 노이즈입니다. 팔다리가 진동하거나 떨리는 것처럼 보입니다. 프레임별 예측 오류, 낮은 해상도, 모션 블러, 조명 부족으로 인해 발생합니다.

자체 관통(Self-Penetration)

팔이 몸통을 통과하거나 손이 다리를 관통하는 등 신체 부위가 비현실적으로 교차합니다. 솔버에 충돌 인식이나 관절 한계가 없을 때 발생합니다.

발 미끄러짐(Foot Sliding)

접촉 단계에서 발이 제자리에 고정되지 않고 바닥에서 미끄러집니다. 루트 모션 드리프트, 부정확한 지면 평면 감지 또는 카메라 움직임 보상으로 인해 발생합니다.

모션 팝(Motion Pops)

인접 프레임 간 관절 위치의 갑작스러운 점프입니다. 일반적으로 가림 현상 복구로 인해 발생하며, 트래커가 팔다리를 놓쳤다가 가시성이 돌아오면 다시 스냅됩니다.

누락 프레임(Missing Frames)

트래킹이 완전히 실패한 애니메이션 데이터의 간격입니다. 빠른 움직임, 심한 가림 현상, 또는 대상이 카메라 프레임을 부분적으로 벗어날 때 흔히 발생합니다.

AI 모캡이 특정 아티팩트에 더 취약한 이유

마커리스 AI 바디 트래킹은 2D 비디오 프레임에서 3D 관절 위치를 예측합니다. 광학 시스템이 물리적 반사 마커를 추적하는 것과 달리, AI 시스템은 픽셀 데이터에서 포즈를 추론합니다. 이로 인해 떨림(각 프레임이 독립적으로 예측되므로)과 자체 관통(2D-3D 변환 과정이 물리적 충돌 제약을 본질적으로 적용하지 않기 때문에)에 특히 취약합니다. 그러나 최신 AI 모캡 플랫폼은 데이터가 3D 소프트웨어에 도달하기 전에 아티팩트를 크게 줄이는 내장형 관통 방지 솔버와 시간적 평활화를 통해 이러한 문제를 해결합니다.

바디 트래킹 정리: 단계별 워크플로

다음 워크플로는 QuickMagic, DeepMotion, Rokoko Vision 또는 광학 시스템의 원시 데이터 등 모든 모캡 데이터 소스에 적용됩니다. 목표는 최소한의 수동 키프레임 작업으로 깨끗한 모캡 데이터를 얻는 것입니다.

원시 데이터 평가

아무것도 건드리기 전에 애니메이션을 전체 속도와 25% 속도로 재생합니다. 어떤 아티팩트가 보이는지 기록하십시오: 떨림이 어디에서 나타나는지(보통 손, 발 같은 말단), 관통이 어디에서 발생하는지(보통 팔이 몸통을 가로지를 때), 발 미끄러짐이 어디에서 발생하는지(보통 걷기나 달리기 주기 동안). 이 평가를 통해 실제로 필요한 정리 단계가 결정됩니다. 모든 클립에 다섯 단계가 모두 필요한 것은 아닙니다.

Blender: 도프 시트 MotionBuilder: 스토리 모드

먼저 관통 문제 수정

관통 보정 트래킹은 다른 수정보다 먼저 적용해야 합니다. 평활화와 보간은 실제로 팔다리를 더 가깝게 이동시키면 교차를 증폭시킬 수 있기 때문입니다. 캡처 도구에 내장된 관통 방지 기능(QuickMagic에는 있음)이 있다면 내보내기 전에 활성화되어 있는지 확인하십시오. 사후에 정리하는 경우 접근 방식은 심각도에 따라 다릅니다:

경미한 관통(팔다리가 약간 겹침): 회전을 생체역학적으로 유효한 범위로 제한하는 관절 한계 제약 조건을 적용합니다. 대부분의 리깅 시스템이 기본적으로 지원합니다.
중간 관통(눈에 띄는 교차): 충돌 인식 솔버를 사용합니다. MotionBuilder에서는 컨트롤 리그에 플롯하고 최악의 프레임에서 이펙터를 수동으로 몸 밖으로 드래그한 다음 애드티브 레이어에 수정 사항을 키합니다. Blender에서는 IK 제약 조건과 함께 포즈 모드를 사용하여 팔다리를 밀어냅니다.
심각한 관통(팔다리가 깊이 박힘): 이 프레임들은 캡처 중 심한 가림 현상이 있었을 가능성이 높습니다. 더 나은 카메라 각도로 해당 부분을 다시 캡처하거나 주변 프레임에서 올바른 포즈를 예측할 수 있는 AI 기반 정리 도구를 사용하는 것을 고려하십시오.

QuickMagic: 내장 관통 방지 MotionBuilder: 컨트롤 리그 + IK Blender: 포즈 모드 + 제약 조건

떨림 및 고주파 노이즈 감소

떨림은 AI 모캡 데이터에서 가장 흔한 아티팩트입니다. 핵심 원칙: 노이즈를 제거할 만큼 충분히 평활화하되 의도적인 움직임 디테일을 잃지 않도록 해야 합니다. 과도한 평활화는 애니메이션을 떠다니고 로봇처럼 보이게 만듭니다.

6-8 Hz 버터워스 저역 통과 필터: 모캡 노이즈 감소의 업계 표준입니다. MotionBuilder에서 모든 관절을 선택하고 차단 주파수 7 Hz로 버터워스 필터를 실행합니다. 이는 고주파 떨림을 제거하면서 의도적인 움직임은 유지합니다.
Blender에서 키 평활화: 그래프 편집기를 열고 모든 키프레임을 선택한 후 키 > 키 평활화(Shift+O)를 사용합니다. 중간 정도의 노이즈에는 2-3회 반복 적용합니다. 심한 떨림에는 F-곡선에 평활화 수정자를 추가합니다.
키프레임 감소를 위한 데시메이트: 평활화 후 데시메이트를 사용하여 키프레임 밀도를 줄입니다. AI 모캡은 종종 프레임당 하나의 키를 생성하는데, 이는 평활화 후에는 불필요합니다. 0.3-0.5 비율이 일반적으로 모션 품질을 유지하면서 파일 편집을 더 쉽게 만듭니다.

MotionBuilder: 버터워스 7 Hz Blender: 키 평활화 + 데시메이트 Maya: 버터워스 필터

발 미끄러짐 및 지면 접촉 수정

발 미끄러짐은 애니메이터가 아니더라도 시청자가 가장 쉽게 알아차리는 아티팩트입니다. 수정 방법은 접촉 단계를 식별하고 해당 프레임 동안 발 위치를 고정하는 것입니다.

MotionBuilder에서: 발에 보조 이펙터를 만듭니다. 각 접촉 단계의 시작으로 스크러빙하여 이펙터 위치를 고정하고, 접촉 중에는 도달 영향력을 100%로, 스윙 중에는 0%로 설정합니다. F-곡선 창을 사용하여 고정 상태와 해제 상태 사이의 전환을 부드럽게 만듭니다.

Blender에서: 그래프 편집기에서 발 뼈의 낮은 속도를 찾아 접촉 프레임을 식별합니다. 해당 프레임 동안 위치 곡선을 평평하게 만듭니다. 또는 먼저 모캡을 FK 뼈에 베이크한 다음 접촉 중 발 위치를 유지하기 위해 IK 제약 조건을 추가합니다.

예방 팁: QuickMagic로 캡처하는 경우 로코모션 클립에는 정지 카메라 모드를 사용하십시오. 카메라 이동 영상은 발 미끄러짐을 증폭시킬 수 있는 루트 모션 보상을 도입합니다.

MotionBuilder: 보조 이펙터 + 도달 Blender: IK 발 고정

간격 채우기 및 전환 평활화

누락 프레임과 모션 팝은 몰입감을 깨는 불연속성을 만듭니다. 짧은 간격(1-5프레임)의 경우 선형 또는 스플라인 보간이 일반적으로 충분합니다. 더 긴 간격의 경우 주변 모션 컨텍스트를 기반으로 한 예측 재구성을 사용합니다. 대부분의 3D 소프트웨어는 손상된 키프레임을 삭제하고 보간이 채우도록 하면 짧은 간격을 자동으로 처리합니다. 모션 팝(갑작스러운 점프)의 경우 문제가 되는 프레임을 선택하여 삭제하고 보간이 전환을 부드럽게 하도록 합니다. 팝이 가림 현상 복구로 인한 경우, 캡처 도구가 사각 지대 동안 팔다리 위치를 예측하는 가림 처리 모드를 제공하는지 확인하십시오.

관통 보정 트래킹: 작동 방식

관통 보정 트래킹은 3D 신체 모션 데이터에서 자체 충돌을 감지하고 해결하는 프로세스입니다. 이는 시스템이 관절의 위치뿐만 아니라 각 신체 부위가 차지하는 부피와 해당 부피가 교차하는지 여부를 이해해야 하기 때문에 바디 트래킹 정리에서 기술적으로 가장 까다로운 측면 중 하나입니다.

관통 보정의 세 가지 접근 방식

접근 방식	작동 방식	강점	한계
관절 한계 적용	관절 회전을 생체역학적으로 유효한 범위로 제한하여 관통을 유발할 수 있는 포즈를 방지	빠르고 실시간, 계산 오버헤드 없음	변환 오류로 인한 관통 해결 불가; 회전 기반 충돌만 포착
충돌 인식 최적화	신체 부위 부피로 충돌 모델을 구축하고 교차하는 부분을 표면 법선 방향으로 밀어냄	눈에 띄는 교차 해결; 변환 오류에도 작동	계산 비용 높음; 수정이 너무 공격적이면 모션 팝 유발 가능
물리 기반 AI	물리적으로 타당한 모션 데이터로 신경망을 훈련시켜 추론 중 기하학적으로 불가능한 포즈에 패널티를 부과	관통이 발생하기 전에 방지; 자연스러운 모션 흐름 유지	훈련 데이터 필요; 새로운 에지 케이스 포착 어려움

QuickMagic 내장 관통 방지

QuickMagic은 애니메이션 데이터를 내보내기 전에 솔브 단계에서 관통 보정을 적용합니다. 비디오를 업로드하면 AI가 먼저 프레임별로 3D 관절 위치를 추정한 다음, 관절 한계를 적용하고 감지된 자체 충돌을 해결하는 사후 솔브 패스를 실행합니다. 이는 내보내는 FBX, BVH 또는 BIP 파일이 원시 프레임별 예측에 비해 관통 아티팩트가 이미 줄어들었음을 의미합니다. 대부분의 댄스, 스포츠 및 퍼포먼스 영상의 경우 내장 보정으로 깨끗한 미리보기에 충분합니다. 전투 롤, 밀착 그래플링 또는 다중 대상 접촉과 같은 복잡한 상호작용은 사후에 수동 정리가 필요할 수 있습니다.

내장 관통 방지로 충분한 경우:

표준 로코모션: 걷기, 달리기, 점프
댄스 및 퍼포먼스 캡처
상체 제스처 및 VTubing 콘텐츠
심한 신체 접촉이 없는 스포츠 클립
명확한 카메라 프레이밍의 단일 대상 캡처

수동 관통 정리가 필요한 경우:

지속적인 신체 접촉이 있는 전투 또는 그래플링 장면
캐릭터 간 팔다리가 교차하는 다중 대상 상호작용
심한 자체 가림을 동반한 앉거나 바닥에서의 움직임
심각한 트래킹 오류를 유발한 잘못된 프레이밍으로 캡처된 클립
메시 수준 충돌 해결이 필요한 고충실도 디지털 더블 작업

비교: 캡처 시 vs 캡처 후 정리

가장 효율적인 바디 트래킹 정리 전략은 수정을 적용하는 시점에 따라 다릅니다. 일부 수정은 캡처 시에 처리하는 것이 가장 좋은 반면, 다른 수정은 3D 소프트웨어에서 사후 처리가 필요합니다.

아티팩트	캡처 시 수정	캡처 후 수정	권장 우선순위
떨림	더 나은 조명, 더 높은 해상도, 느린 움직임	버터워스 필터, 키 평활화, 시간적 평활화	캡처 후 (평활화가 안정적이고 빠름)
관통	내장 관통 방지 솔버 (QuickMagic)	컨트롤 리그 IK, 충돌 인식 최적화, 수동 키잉	캡처 시 우선, 잔여 문제는 캡처 후
발 미끄러짐	정지 카메라, 전신 프레이밍, 평평한 지면	IK 발 고정, 보조 이펙터, 접촉 클램핑	캡처 후 (프레임 정확한 접촉 감지 필요)
모션 팝	가림 현상 피하기, 대상을 프레임 내에 완전히 유지	불량 프레임 삭제, 보간, 예측 재구성	캡처 후 (수동 프레임 선택 필요)
누락 프레임	연속적인 가시성 보장, 여러 카메라 각도 사용	스플라인 보간, AI 기반 간격 채움	캡처 후 (짧은 간격은 쉬움, 긴 간격은 AI 도구 필요)

깨끗한 모캡 데이터를 위한 도구: 비교

다양한 도구는 바디 트래킹 정리의 다양한 측면에 특화되어 있습니다. 깨끗한 모캡 데이터를 생성하기 위한 가장 일반적인 옵션의 비교입니다.

도구	관통 방지	떨림 필터	발 고정	가장 적합한 용도
QuickMagic

How to Get Clean Body Tracking Data: Anti-Penetration and Noise Reduction Tips