wan2.1_fun Image-vers-Vidéo (Transfert d'Action) Version Ultra-Stable

Le flux de travail de migration d'action de wan2.1_fun est construit sur la base du flux de travail officiel.

wan2.1_fun a été amélioré et testé pendant assez longtemps. Tant le flux de travail de KJ que le flux officiel ont été essayés, mais des problèmes tels que des images brisées, des visages déformés, une mauvaise cohérence et bien d'autres persistent. Après des tests approfondis, les résultats n'étaient pas aussi bons que ceux de mimimotion. Par conséquent, le flux de travail n'a pas été publié. Aujourd'hui, une idée soudaine a surgi : utiliser l'openpose de mimimotion pour le traitement des actions, puis le fusionner avec le traitement de profondeur après un floutage. Étonnamment, l'effet de contrôle s'est avéré excellent, tandis que la synchronisation des expressions faciales est également devenue plus raisonnable. Voici le flux de travail à partager.

Voici une explication globale (exPlanAtion) :

① Par rapport à mimimotion, cette version du flux de travail wan2.1_fun offre un contrôle dynamique plus raisonnable pour l'ensemble de la scène vidéo. Par exemple, les effets dynamiques des objets en arrière-plan sont meilleurs. L'inconvénient est que la génération à basse résolution apparaît floue, il est donc recommandé d'utiliser une résolution de 720*1280.

② L'efficacité de génération n'est pas aussi bonne que celle de mimimotion.

③ À mesure que la durée de génération augmente, le visage s'écarte progressivement de l'image de référence originale (mimimotion rencontre également ce problème). Après la génération, une réparation par échange de visage est toujours nécessaire.

④ La génération des mains et des pieds est médiocre (problème courant de l'IA), et aucune meilleure méthode pour traiter les mains et les pieds n'a été trouvée pour l'instant. Dans l'attente de nouvelles technologies.

Résumé : Dans l'ensemble, wan2.1_fun et mimimotion ont chacun leurs avantages et leurs inconvénients. Tout le monde peut essayer d'exécuter les deux flux de travail et choisir une solution qui correspond à ses besoins et scénarios spécifiques.

Créer n'est pas facile. Si cela vous a aidé, veuillez le sauvegarder plus souvent, exécutez des applications ou des flux de travail en ligne plus fréquemment. Votre soutien est ma motivation pour créer. Merci pour votre soutien ! 

Si vous avez des questions, veuillez laisser un commentaire. Je répondrai rapidement lorsque je les verrai. Vous êtes les bienvenus pour échanger des idées, apprendre ensemble et progresser ensemble !