Vidéo de smartphone → Mouvement de personnage modifiable
Capture de mouvement IA gratuite depuis votre téléphone : guide d'animation 3D et 2D
Enregistrez une performance avec un smartphone ordinaire, convertissez-la en animation squelettique modifiable avec QuickMagic, retargettez le résultat sur un personnage 3D ou convertissez le mouvement pour un workflow Reallusion Cartoon Animator G3 Human.
Faits actuels du plan gratuit QuickMagic
Regardez le didacticiel original téléphone vers animation
La vidéo originale du créateur montre une performance enregistrée sur un téléphone et utilisée à la fois pour l'animation de personnages 3D et un workflow de personnage 2D Cartoon Animator.
Comment fonctionne la capture de mouvement par téléphone
Votre téléphone est l'appareil d'enregistrement, pas l'ordinateur de capture de mouvement. QuickMagic reçoit la vidéo RGB téléchargée, estime la pose du corps de l'interprète à travers les images, reconstruit le mouvement en 3D et écrit le résultat sous forme de données d'animation squelettique. L'animation exportée peut ensuite être retargettée sur un personnage numérique.
Comme l'entrée ne contient que les vues capturées par la caméra, la reconstruction est la plus fiable lorsque les articulations restent visibles. Une occlusion longue, un flou de mouvement, des pieds coupés, un faible contraste et un travail au sol extrême augmentent l'ambiguïté.
| Étape | Ce qui se passe | Ce que vous contrôlez |
|---|---|---|
| Enregistrement | Le téléphone enregistre des images vidéo ordinaires | Cadrage, éclairage, netteté, mouvement de la caméra et performance |
| Estimation de pose | QuickMagic suit les caractéristiques visibles du corps, des mains ou du visage selon le workflow sélectionné | Sélection du sujet, mode de capture et qualité source |
| Reconstruction 3D | Les estimations de pose image par image deviennent une hiérarchie squelettique en mouvement | Sélection du modèle/préréglage, options de sol et de nettoyage |
| Export et retarget | Le mouvement source est mappé sur un personnage de production | Préréglage du squelette, fréquence d'images, pose de référence, contacts et mouvement racine |
1Planifier la capture avant d'appuyer sur Enregistrer
- Décidez si vous avez besoin du mouvement du corps entier, du haut du corps, des mains ou du visage.
- Choisissez une capture à caméra fixe sauf si le plan nécessite spécifiquement un mouvement de caméra.
- Confirmez la destination : Blender, Maya, UE5, Unity, Cartoon Animator ou un autre outil.
- Choisissez la fréquence d'images cible avant l'enregistrement et l'exportation.
- Gardez la performance dans les limites de durée et de taille de fichier du plan actif.
- Décidez si le clip final doit être sur place ou préserver le déplacement racine.
2Enregistrer une vidéo de smartphone traçable
Placement de la caméra
- Pour le mouvement du corps entier, gardez la tête et les deux pieds dans le cadre pendant toute la prise.
- Laissez une marge pour les mouvements amples des bras, les sauts et les virages.
- Placez la caméra suffisamment loin pour réduire la distorsion de perspective.
- Utilisez un trépied ou un support stable sauf si le workflow est configuré pour une caméra mobile.
Éclairage et exposition
- Utilisez un éclairage frontal ou latéral uniforme qui rend les membres lisibles.
- Évitez une fenêtre lumineuse directement derrière l'interprète.
- Empêchez le téléphone d'utiliser un obturateur lent qui produit un fort flou de mouvement.
- Verrouillez la mise au point et l'exposition lorsque la caméra du téléphone le permet.
Fréquence d'images
Enregistrez à 30 FPS pour la plupart des performances contrôlées. Utilisez 60 FPS pour les actions rapides uniquement lorsqu'il y a suffisamment de lumière pour garder les images nettes et que le plan QuickMagic choisi et la destination supportent la sortie souhaitée. Une fréquence d'images plus élevée ne peut pas récupérer les articulations cachées ou les silhouettes floues.
| Performance | Approche d'enregistrement suggérée | Risque principal |
|---|---|---|
| Marche, geste, jeu d'acteur corporel dialogué | 1080p stable, 30 FPS, sujet complet visible | Pieds coupés et exposition lente de la caméra |
| Danse, coups de pied, virages rapides | Éclairage vif, 60 FPS si disponible, marge de cadre supplémentaire | Flou de mouvement, auto-occlusion et sortie du cadre |
| À genoux ou contact au sol | Plan plus large, sol visible, angle de côté avant | Membres cachés et contact ambigu |
| Jeu d'acteur de personnage 2D haut du corps | Cadrage à partir de la taille avec mains et torse clairs | Mains croisant le corps ou sortant du cadre |
3Télécharger et valider le mouvement dans QuickMagic
- Transférez le fichier téléphone original sans le ré-encoder via une application de messagerie.
- Connectez-vous à QuickMagic et ouvrez Vidéo vers animation 3D.
- Téléchargez le clip et confirmez que la plage d'images correcte est présente.
- Sélectionnez le sujet et les paramètres de capture qui correspondent à la caméra et aux détails du corps.
- Examinez l'aperçu à vitesse normale et image par image.
- Régénérez ou affinez la source lorsque vous voyez des échanges de membres majeurs, des sauts de racine ou des contacts perdus.
4Exporter le fichier de mouvement correct
Le plan gratuit actuel publie l'export FBX. Les plans Starter et Professionnel listent des préréglages supplémentaires tels que Unreal, Mixamo, BIP, VMD, Unity Anim, C4D, Character Creator/iClone et Roblox.
- Choisissez le squelette ou le préréglage logiciel requis par le pipeline de destination.
- Faites correspondre la fréquence d'images de sortie à celle du projet.
- Conservez une exportation source intacte.
- Nommez le fichier clairement, par exemple
Actor_Walk_Phone_Source_30fps.fbx. - Testez un court clip avant de traiter un lot important.
Workflow 3D : vidéo de téléphone vers personnage 3D
- Importez le FBX QuickMagic. Créez ou sélectionnez le squelette source dans votre DCC ou moteur de jeu.
- Préparez le personnage cible. Confirmez le rig cible, les proportions et la pose de référence.
- Mappez les squelettes. Utilisez le système de retargeting de l'application.
- Validez les contacts. Vérifiez les pieds, les mains, les accessoires, la trajectoire racine et la hauteur du sol.
- Peaufinez l'animation cible. Corrigez les problèmes introduits par les différentes proportions du personnage.
- Exportez ou intégrez. Ne faites de Bake qu'après avoir vérifié le workflow modifiable.
| Logiciel | Workflow typique | Zone de nettoyage principale |
|---|---|---|
| Blender | Importer FBX → mapper les os → retargetter vers Rigify/rig personnalisé | Échelle, mouvement racine, contacts des pieds et nettoyage des courbes |
| Maya | Importer FBX → caractériser avec HumanIK ou retargetter studio | Pose de référence, contact au sol et couches d'animation |
| Unreal Engine 5 | Importer squelette source → IK Rig → IK Retargeter | Pose de retarget, mouvement racine et glissement des pieds cible |
| Unity | Importer FBX → configurer Humanoid Avatar → Animator | Mappage de l'avatar, transform racine et IK des pieds |
| 3ds Max | Importer FBX → retargetter vers CAT/Biped/rig personnalisé | Inversions de rotation, densité des clés et contacts |
Workflow 2D : mouvement QuickMagic vers Cartoon Animator
Étape 1 : Convertir la sortie QuickMagic
Si vous commencez avec FBX, utilisez un workflow Reallusion compatible pour convertir l'animation humaine en un format de mouvement accepté par Cartoon Animator. Reallusion documente l'importation de mouvement humain FBX ou BVH via Character Creator pour une utilisation dans iClone ; le chemin exact dépend des versions de produits installées et des licences.
Étape 2 : Utiliser un personnage G3 Human pris en charge
La documentation actuelle d'Importer un mouvement 3D de Reallusion spécifie les personnages G3 Human. Appliquez un G3 Human compatible ou un Dummy pour mouvement 3D avant de charger le clip converti.
Étape 3 : Ouvrir Importer un mouvement 3D
- Sélectionnez le personnage G3 Human.
- Ouvrez Animation → Importer un mouvement 3D ou le bouton de barre d'outils correspondant.
- Chargez le mouvement converti compatible.
- Prévisualisez le personnage factice 3D et le personnage 2D ensemble.
Étape 4 : Choisir l'angle de projection de la caméra
Un mouvement 3D peut tourner librement, mais un personnage 2D est construit à partir d'un ensemble limité de sprites d'angle de face. Choisissez l'angle de projection qui correspond à la conception du personnage. Reallusion documente les concepts de face, de trois quarts avant, de côté, de trois quarts arrière et de dos.
Étape 5 : Appliquer et affiner le mouvement
- Prévisualisez le personnage factice 3D et le personnage 2D ensemble.
- Activez le suivi de caméra si le personnage sort de l'écran pendant l'aperçu.
- Ajustez la vitesse, le trimming et la projection du mouvement.
- Utilisez le décalage au sol et les paramètres de posture du corps pour améliorer le contact.
- Cliquez sur Appliquer à la timeline et modifiez le résultat 2D.
Comment améliorer la qualité du mocap par téléphone
| Problème | Correction à l'enregistrement | Correction dans l'animation |
|---|---|---|
| Glissement des pieds | Gardez les pieds visibles et enregistrez un plan de sol clair | Corrigez la vitesse racine et le contact des pieds cible après le retarget |
| Instabilité | Utilisez une lumière plus vive, une caméra stable et le fichier vidéo original | Appliquez un lissage sélectif plutôt que de filtrer tout le squelette |
| Membre incorrect après croisement des bras | Changez l'angle de la caméra ou réduisez l'auto-occlusion prolongée | Corrigez la piste source ou régénérez avant l'export |
| Saut du genou ou du coude | Augmentez la visibilité des membres et réduisez le flou | Corrigez la pose de retarget, la direction du pôle et les clés locales |
| Distorsion du sprite 2D | Choisissez un mouvement adapté aux angles disponibles du personnage | Changez l'angle de projection, retourner le corps, la posture et les paramètres des mains |
Mocap IA par téléphone vs. capture de mouvement traditionnelle
| Facteur | Téléphone + QuickMagic | Système optique professionnel |
|---|---|---|
| Configuration | Vidéo ordinaire unique ; aucun marqueur requis | Volume multi-caméras calibré, marqueurs et workflow spécialisé |
| Coût et accès | Faible coût d'entrée et traitement par navigateur | Coût plus élevé en équipement, espace et opérateur |
| Gestion de l'occlusion | Limité par ce que la caméra voit et les a priori de mouvement appris | Plusieurs vues de caméra réduisent de nombreux échecs de ligne de vue |
| Précision des contacts | Nécessite souvent un nettoyage pour les pieds, les mains et l'interaction avec le sol | Généralement plus forte |
