Telefon-Video → Gesichts-Blendshapes → Blender
Gesichts-Motion-Capture aus Video: QuickMagic Phone MoCap Leitfaden
Nehmen Sie eine Gesichtsperformance mit einem gewöhnlichen Smartphone auf, extrahieren Sie Blendshape-Animationen mit QuickMagic, leiten Sie ARKit-artige Kanäle an einen Blender-Charakter weiter, korrigieren Sie Ausdrucksbereiche und Zittern, und senden Sie das Ergebnis an Maya, Unreal Engine oder Unity.
Aktuelle Workflow-Fakten
Sehen Sie sich die originalen Gesichts-Capture-Tutorials an
Telefon-Video zu Blender Facial MoCap
Demonstriert den ursprünglichen Workflow mit Telefonvideo, QuickMagic und Blender-Gesichts-Motion-Capture.
Video auf YouTube öffnenQuickMagic KI + Blender Human Generator Gesichtsanimation
Zeigt einen optionalen kostenpflichtigen Blender-Charakter-Workflow mit Human Generator.
Video auf YouTube öffnenWas Gesichts-Motion-Capture produziert
Gesichts-Motion-Capture wandelt sichtbare Ausdrücke in zeitveränderliche Steuerelemente um. In einem Blendshape-Workflow repräsentiert jedes Steuerelement eine Bewegung wie Kieferöffnung, Augenlidverschluss, Augenbrauenheben, Lippenpressen oder Wangenaufblähen. Die Animation ist die Abfolge von Koeffizientenwerten über die Zeit – nicht das endgültige Charakter-Mesh.
Apple dokumentiert ARKit-Gesichtsausdrücke als Wörterbuch benannter Koeffizienten, die mit bestimmten Gesichtsbewegungen verknüpft sind. Diese Koeffizienten können 2D- oder 3D-Charaktere steuern. Die OnlyFace-Dokumentation von QuickMagic beschreibt einen ARKit-kompatiblen 52-Blendshape-Workflow.
1Eine verfolgbare Telefonperformance aufnehmen
- Stellen Sie das Telefon auf Augenhöhe und halten Sie es stabil.
- Rahmen Sie das Gesicht so ein, dass Augenbrauen, Kinn und beide Wangen sichtbar bleiben.
- Verwenden Sie weiches, gleichmäßiges Front- oder seitliches Frontlicht.
- Beginnen Sie mit etwa zwei Sekunden neutralem Ausdruck.
- Machen Sie deutliches Blinzeln, Kieferöffnungen, Lächeln, Stirnrunzeln, Lippenspitzen und Augenbrauenbewegungen.
- Fügen Sie links/rechts-asymmetrische Ausdrücke hinzu, um gespiegelte Zuordnungen zu erkennen.
- Minimieren Sie Brille-Reflexionen, Haare vor den Augen, Hände vor dem Mund und schnelle Kopfdrehungen.
- Laden Sie die originale Kameradatei hoch, nicht eine rekomprimierte Kopie aus sozialen Medien.
| Aufnahmeoption | Empfohlener Ausgangspunkt | Warum |
|---|---|---|
| Auflösung | 1080p oder besser, wenn verfügbar | Bewahrt Details in Augen, Lippen und Augenbrauen |
| Bildrate | 30 FPS für normale Schauspielerei; 60 FPS für schnelle Ausdrücke, wenn der Plan es unterstützt | Gleicht Kurvendichte und sichtbare Bewegungsdetails aus |
| Objektiv | Sehr nahe Ultraweitwinkel-Einrahmung vermeiden | Reduziert Gesichtsperspektivenverzerrung |
| Kopfbewegung | Mäßig und kontrolliert | Hält das Gesicht lesbar und trennt Ausdruck von Kopfhaltung |
2Gesichtsanimation in QuickMagic verarbeiten und validieren
- Melden Sie sich bei QuickMagic an und öffnen Sie den entsprechenden Video-zu-Mocap-Workflow.
- Laden Sie das originale Telefonvideo hoch.
- Wählen Sie die Gesichtsverarbeitung oder das OnlyFace-Format, wenn es im aktiven Plan verfügbar ist.
- Verwenden Sie nur den erforderlichen Bildbereich.
- Generieren Sie die Animation.
- Überprüfen Sie neutrales Gesicht, Blinzeln, Kieferöffnung, Lippenschluss, Lächeln, Augenbrauen und asymmetrische Ausdrücke.
- Verwenden Sie die 2D-Verfeinerung bei unterstützten kostenpflichtigen Plänen, wenn die sichtbare Quellverfolgung falsch ist.
- Exportieren Sie die erforderliche FBX/Gesichtsausgabe und bewahren Sie eine unberührte Quelldatei auf.
Quell- und Ziel-Gesichtskanäle verstehen
Minimaler nützlicher Validierungssatz
jawOpeneyeBlinkLeftundeyeBlinkRightmouthSmileLeftundmouthSmileRightbrowInnerUpmouthPucker- Mindestens ein Wangen-/Nasenausdruck
- Augenbewegungskanäle, wenn das Ziel sie unterstützt
Drei Zuordnungsfälle
| Quelle und Ziel | Empfohlener Ansatz |
|---|---|
| Namen und Bedeutung stimmen überein | Direkte Treiber erstellen, dann Verstärkung und Begrenzung anpassen. |
| Bedeutung stimmt, Namen unterscheiden sich | Explizites Zuordnungswörterbuch erstellen. |
| Ziel verwendet Gelenke/Controller | Koeffizienten über Treiber, Knoten oder getriebene Keys auf Controller-Transformationen oder Attribute abbilden. |
3Blender-Workflow mit integrierten Shape-Keys und Treibern
- Öffnen Sie Blender und wählen Sie Datei → Importieren → FBX.
- Importieren Sie das QuickMagic Gesichts-FBX mit aktivierter Animation.
- Wählen Sie das Quell-Gesichts-Mesh aus und prüfen Sie Objekt-Daten-Eigenschaften → Shape Keys.
- Bewegen Sie den Zeitstrahl, um zu bestätigen, dass die Quell-Shape-Key-Werte animiert sind.
- Laden Sie den Zielcharakter in dieselbe Szene.
- Bestätigen Sie, dass das Ziel Shape Keys oder ein anderes steuerbares Gesichtsrig enthält.
- Fügen Sie für jeden Zielausdruck einen Treiber hinzu, der den passenden Quellwert ausliest.
- Fügen Sie Verstärkung, Begrenzung oder eine benutzerdefinierte Antwortkurve hinzu, wenn der Zielausdruck zu schwach oder zu stark ist.
- Testen Sie den gesamten Clip, bevor Sie die Quelle baken oder löschen.



