wan2.1_fun Imagem para Vídeo (Transferência de Ação) Versão Ultra-Estável

O fluxo de trabalho de migração de ação do wan2.1_fun foi construído com base no fluxo de trabalho oficial.

O wan2.1_fun passou por ajustes por bastante tempo. Tanto o fluxo de trabalho do KJ quanto o oficial foram testados, mas problemas como imagens corrompidas, rostos distorcidos, baixa consistência e vários outros persistiram. Após testes extensivos, os resultados não foram tão bons quanto os do mimimotion. Portanto, o fluxo de trabalho não foi lançado. Hoje, tive uma ideia repentina: usar o openpose do mimimotion para o processamento de ação, e depois mesclar com o processamento de profundidade após o desfoque. Surpreendentemente, o efeito de controle ficou excelente, enquanto a sincronização das expressões faciais também se tornou mais razoável. Aqui está o fluxo de trabalho para compartilhamento.

Abaixo está uma explicação geral:

① Em comparação com o mimimotion, esta versão do fluxo de trabalho do wan2.1_fun oferece um controle dinâmico mais razoável para a cena geral do vídeo. Por exemplo, os efeitos dinâmicos dos objetos no fundo são melhores. A desvantagem é que a geração em baixa resolução aparece borrada, por isso a resolução de 720*1280 é recomendada.

② A eficiência de geração não é tão boa quanto a do mimimotion.

③ Conforme a duração da geração aumenta, o rosto gradualmente diverge mais da imagem de referência original (o mimimotion também enfrenta esse problema). Após a geração, ainda é necessária uma reparação por troca de rosto (face-swapping).

④ A geração de mãos e pés é ruim (problema comum em IA), e nenhum método melhor para lidar com mãos e pés foi encontrado por enquanto. Ansioso por novas tecnologias.

Resumo: No geral, o wan2.1_fun e o mimimotion têm seus prós e contras. Todos podem tentar executar ambos os fluxos de trabalho e escolher a solução que melhor se adapta às suas necessidades e cenários específicos.

Criar não é fácil. Se isso te ajudou, por favor, salve mais vezes, execute aplicativos ou fluxos de trabalho online com mais frequência. Seu apoio é minha motivação para criar. Obrigado pelo seu apoio! 

Se você tiver alguma dúvida, deixe um comentário. Responderei prontamente assim que os ver. Sinta-se à vontade para trocar ideias, aprender juntos e progredir juntos!