百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

comfyui安装MimicMotion扩展,AI跳舞动作模仿

myzbx 2025-03-30 19:10 103 浏览

一张照片生成一段跳舞的视频,在视频平台是很火爆的内容,简单来带大家来了解一下是如何通过工具实现的。

所需的工具是comfyui秋叶版本,我选择秋叶版的原因是从秋叶版的stable diffustion走过来的,对秋叶启动器的设置和页面布局比较了解。

安装mimicmotionwapper

1.打开秋叶comfyui启动器,将核心版本升级到最新版。

2.在安装新扩展里搜索“MimicMotion”选择MimicMotionWrappe进行安装。

也可以从网址进行下载安装

https://github.com/kijai/ComfyUI-MimicMotionWrapper

3.到comfyui找到下面的路径\ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\examples\mimic_motion_example_02.json

4.这个mimic_motion_example_02.json文件就是工作流,我们直接将这个json文件拖到comfyui操作界面即可打开工作流。


5.如果打开节点有报错,就要安装相对应的节点,例如video节点报错,在管理器搜索videohelpersuite进行安装。


打开管理器

搜索缺失节点

安装成功会进行重启,会发现报错消失,以此类推,后面的报错插件依次按照这个方法解决。



安装stable-video-diffusion-img2vid-xt-1-1

没有报错以后介绍如何安装大模型找到readme.md文件,打开后后介绍如何下载安装

在根目录下找到models文件夹,进入后新建“mimicmotion”文件夹。

需要魔法访问https://huggingface.co/Kijai/MimicMotion_pruned/tree/main

在\comfyui\models文件夹下新建diffusers文件夹

在\ComfyUI\models\diffusers\文件下安装stable-video-diffusion-img2vid-xt-1-1 相关文件。

因为上述地址需要魔法,在码云平台有这个
Hugging Face 模型镜像,克隆到diffusers文件夹下

可以通过在diffusers文件夹下进入cmd终端通过以下命令直接克隆到当前文件夹下,这种操作可以确保文件的完整性。

码云https://gitee.com/hf-models/stable-video-diffusion-img2vid-xt-1-1

安装DWPose

在目录ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\models文件夹下新建DWPose文件夹

码云https://gitee.com/hf-models/DWPose  


通过cmd进行下载

下载MimicMotion_1-1.pth

https://gitee.com/hf-models/MimicMotion对MimicMotion_1-1.pth进行下载 ,存放位置。


操作完以上流程,就可以打开制作视频,如果出现mimicmotionwrapper报错紫色时,显示报错结果是DWPose的时候,在管理器搜索DWPose下载相关插件



如运行提示缺少yolox_l.torchscript.pt和dw-ll_ucoco_384_bs5.torchscript.pt时,可以通过必应直接搜索进行下载。

https://huggingface.co/hr16/yolox-onnx/blob/main/yolox_l.torchscript.pt
https://huggingface.co/hr16/DWPose-TorchScript-BatchSize5/blob/main/dw-ll_ucoco_384_bs5.torchscript.pt

如出现以下情况时,大部分是网络原因造成,无法访问外网造成的,我们需要对起启动器进行代理配置。

出现mimicmotionmodel报错是因为网络问题,无法下载相关模型,在启动器的设置中,将配置模式新手改为专家。

将代理设置打开,将下方全部勾选全部打开


重启秋叶启动器,运行程序,会发现后台在自动下载确实文件和模型。

如果出现报错大部分原因是因为网络问题造成的文件或者模型没有下载成功导致的文件缺失。

相关推荐

怎么恢复7z文件 7z文件删除了怎么恢复

7z是一种压缩格式的文件,它运用LZMA压缩算法,该压缩算法的输出稍后被算数编码进行处理以便后续进一步压缩,压缩比十分高。我们可以将文件压缩成这种格式,便于传输,保存,占空间少。了解更多7z文件知识...

郎酒让消费者喝得明明白白 算术题里有答案

日前,『郎酒酱香产品企业内控准则』颁布,郎酒首次公开酱香产品生产全过程,公布酱香产品产能、储能及投放计划。随后,郎酒官微向消费者发出「品控算术题」有奖问答。郎酒亮出家底,消费者踊跃留言。8天后,谜底揭...

学龄前,比识字、算术更重要的是这三件事

“为了给孩子选择一家合适的幼儿园,我曾穿梭于纽约各家幼儿园的开放日,这些幼儿员既包括主流的公立幼儿园,还包括那些遥不可及的私人幼儿园。我的目的就是想了解他们的教育理念是什么,到底厉害在哪里,看看对于我...

参加CSP-J信奥赛需要掌握数学知识

在C++语法的学习中需要储备的数学知识如下①数据类型:需要知道整数、正整数、负整数、小数、判断对错②算术运算符:加法、减法、乘法、除法、取模运算③关系表达式:大于、大于等于、小于、小...

1g米饭能做多少深蹲?今天我们来算一算

减重我们都知道3分在练,7分在吃,吃这件事情上,真的是每一口都算数。今天我们来算一笔账,1粒米饭可以做多少事情?本着认真负责的态度,今天在食物秤上称了1g米饭,是16粒。根据能量换算:100g米饭是4...

web 自动化测试,一定得掌握的 8 个核心知识点

使用cypress进行端对端测试,和其他的一些框架有一个显著不同的地方,它使用JavaScript作为编程语言。传统主流的selenium框架是支持多语言的,大多数QA会的pytho...

大话C语言:赋值运算符(c语言中赋值运算符是什么)

赋值运算符是最基本的运算符之一,用于将右侧的值或表达式的计算结果赋给左侧的变量。它是一个二元运算符,意味着它需要两个操作数:一个是目标变量(左侧),另一个是要赋给该变量的值或表达式(右侧)。赋值运算符...

Vue进阶(幺幺伍):js 将字符串转换为boolean

Boolean();参数为0、null和无参数返回false,有参数返回true。Boolean("");//输出为:falseBoolean(null);//输出为...

mongodb查询的语法(大于,小于,大于或等于,小于或等于等等)

1).大于,小于,大于或等于,小于或等于$gt:大于$lt:小于$gte:大于或等于$lte:小于或等于例子:db.collection.find({"field":{$gt:valu...

Python学不会来打我(21)python表达式知识点汇总

在Python中,表达式是由变量、运算符、函数调用等组合而成的语句,用于产生值或执行特定操作。以下是对Python中常见表达式的详细讲解:1.1算术表达式涉及数学运算的表达式。例如:a=5b...

C|数据存储地址与字节偏移、数据索引

话说C是面向内存的编程语言。数据要能存得进去,取得出来,且要考虑效率。不管是顺序存储还是链式存储,其寻址方式总是很重要。顺序存储是连续存储。同质结构的数组通过其索引表示位置偏移,异质结构的结构体通过其...

下班后累懵?4 个 JS 手写题帮你搞定前端面试高频考点

打工人下班后最痛苦的事,莫过于拖着疲惫的身子还要啃前端面试题吧?看着那些密密麻麻的JS代码,脑子都快转不动了!别担心,今天咱就用轻松的方式,带你吃透4道高频手写题,让你在面试时自信满满,再也不...

嵌入式数据库sqlite3【进阶篇】-子句和函数的使用,小白一文入门

sqlite在《嵌入式数据库sqlite3命令操作基础篇-增删改查,小白一文入门》一文中讲解了如何实现sqlite3的基本操作增删改查,本文介绍一些其他复杂一点的操作。比如where、orderby...

前缀表达式与后缀表达式(前缀表达式后缀表达式中缀表达式计算)

昨天晚上和儿子一起学习了前缀表达式和后缀表达式。这应该是字符串算式如何被计算机识别并计算的2种方法。本来是想先给他讲一个逆波兰式(后缀表达式),以后再讲前缀表达式。没想到他还挺聪明,很快就把2个都掌握...

Python快速入门教程1:基本语法、数据类型、运算符、数字字符串

Python3的基础教程,涵盖了基本语法、数据类型、类型转换、解释器、注释、运算符、数字和字符串等内容,并附有使用实例场景。Python3的基础教程,涵盖了基本语法、数据类型、类型转换、解释器、注释、...