Facial Motion Capture From Video: Free Phone-Based MoCap Guide

원본 페이셜 캡처 튜토리얼 보기

두 플레이어 모두 정적 YouTube iframe을 사용하며 런타임 JavaScript가 필요하지 않습니다. 브라우저, 지역, 네트워크 또는 로컬 파일 뷰어가 내장 재생을 차단하는 경우 빨간색 직접 링크 버튼을 사용하세요. 모든 기사 이미지는 이 HTML 파일에 포함되어 있습니다.

페이셜 모션 캡처가 생성하는 것

페이셜 모션 캡처는 보이는 표정을 시간에 따라 변하는 컨트롤로 변환합니다. 블렌드셰이프 워크플로에서는 각 컨트롤이 터 열기, 눈꺼풀 닫기, 눈썹 올리기, 입술 압축 또는 뺨 부풀리기와 같은 움직임을 나타냅니다. 애니메이션은 최종 캐릭터 메시가 아닌 시간에 따른 계수 값의 시퀀스입니다.

Apple은 ARKit 얼굴 표정을 특정 얼굴 특징 움직임과 관련된 명명된 계수 사전으로 문서화합니다. 이러한 계수는 2D 또는 3D 캐릭터를 구동할 수 있습니다. QuickMagic의 OnlyFace 문서는 ARKit 호환 52-블렌드셰이프 워크플로를 설명합니다.

소스 및 대상 페이셜 채널 이해

최소 유용한 검증 세트

• jawOpen
• eyeBlinkLeft 및 eyeBlinkRight
• mouthSmileLeft 및 mouthSmileRight
• browInnerUp
• mouthPucker
• 최소 하나의 뺨/코 표정
• 대상이 지원할 때 눈-응시 채널

세 가지 매핑 사례

블렌더 스크립트: 일치하는 셰이프 키 이름에 대한 드라이버 생성

아래 스크립트는 소스 셰이프 키와 이름이 정확히 일치하는 모든 대상 셰이프 키에 대해 클램프된 드라이버를 생성합니다. 실행하기 전에 블렌더 파일을 복제하고 두 오브젝트 이름을 변경하십시오.

# 블렌더: 일치하는 페이셜 셰이프 키 이름에 대한 드라이버 생성
# 블렌더 스크립팅 워크스페이스에서 실행하기 전에 이 두 오브젝트 이름을 편집하십시오.
import bpy

SOURCE_OBJECT = "QuickMagic_SourceFace"
TARGET_OBJECT = "Target_Character"
GAIN = 1.0

source = bpy.data.objects.get(SOURCE_OBJECT)
target = bpy.data.objects.get(TARGET_OBJECT)

if source is None or target is None:
    raise RuntimeError("소스 또는 대상 오브젝트를 찾을 수 없습니다.")

if not source.data.shape_keys or not target.data.shape_keys:
    raise RuntimeError("두 오브젝트 모두 셰이프 키를 포함해야 합니다.")

source_keys = source.data.shape_keys.key_blocks
target_keys = target.data.shape_keys.key_blocks

created = []
skipped = []

for target_key in target_keys:
    name = target_key.name
    if name == "Basis":
        continue
    if source_keys.get(name) is None:
        skipped.append(name)
        continue

    # 대상 값에 기존 드라이버가 있으면 제거합니다.
    try:
        target_key.driver_remove("value")
    except TypeError:
        pass

    fcurve = target_key.driver_add("value")
    driver = fcurve.driver
    driver.type = "SCRIPTED"

    variable = driver.variables.new()
    variable.name = "src"
    variable.type = "SINGLE_PROP"
    variable.targets[0].id_type = "KEY"
    variable.targets[0].id = source.data.shape_keys
    escaped = name.replace("\\", "\\\\").replace('"', '\\"')
    variable.targets[0].data_path = f'key_blocks["{escaped}"].value'

    # 일반적인 0-1 대상 범위로 클램프합니다.
    driver.expression = f"min(max(src * {GAIN}, 0.0), 1.0)"
    created.append(name)

print(f"생성된 드라이버 수: {len(created)}")
print("건너뛴 일치하지 않는 대상 키:", skipped)

스크립트 실행 후

1. 타임라인을 스크러빙하고 대상이 애니메이션되는지 확인합니다.
2. 인쇄된 일치하지 않는 대상 키 목록을 검토합니다.
3. 다르게 명명된 채널을 수동으로 매핑합니다.
4. 필요한 경우 GAIN 또는 개별 드라이버 표현식을 변경합니다.
5. 왼쪽/오른쪽 채널을 주의 깊게 테스트합니다.

선택적 Human Generator 워크플로

Human Generator는 QuickMagic 요구 사항이 아닌 유료 블렌더 캐릭터 생성 애드온입니다. 현재 마켓플레이스 목록은 최신 블렌더 버전을 지원하지만, 구매 등급, 블렌더 호환성 및 전송 도구는 현재 제품 페이지에서 확인해야 합니다.

1. 문서화된 블렌더 애드온 워크플로를 통해 Human Generator를 설치합니다.
2. 페이셜 셰이프 키 시스템이 있는 캐릭터를 생성하거나 로드합니다.
3. QuickMagic 소스 FBX를 가져옵니다.
4. 소스 및 대상 셰이프 키 이름을 비교합니다.
5. 애드온이 소스 데이터를 명시적으로 지원할 때 문서화된 전송 기능을 사용하거나 블렌더 드라이버를 사용합니다.
6. 대상별 표정 강도와 수정 셰이프를 조정합니다.

페이셜 애니메이션 정리 및 보정

표정이 너무 약함

해당 표정의 채널 게인을 높이거나 더 가파른 응답 곡선을 사용하십시오.

표정이 너무 강하거나 얼굴을 클리