百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

comfyui安装MimicMotion扩展,AI跳舞动作模仿

myzbx 2025-03-30 19:10 23 浏览

一张照片生成一段跳舞的视频,在视频平台是很火爆的内容,简单来带大家来了解一下是如何通过工具实现的。

所需的工具是comfyui秋叶版本,我选择秋叶版的原因是从秋叶版的stable diffustion走过来的,对秋叶启动器的设置和页面布局比较了解。

安装mimicmotionwapper

1.打开秋叶comfyui启动器,将核心版本升级到最新版。

2.在安装新扩展里搜索“MimicMotion”选择MimicMotionWrappe进行安装。

也可以从网址进行下载安装

https://github.com/kijai/ComfyUI-MimicMotionWrapper

3.到comfyui找到下面的路径\ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\examples\mimic_motion_example_02.json

4.这个mimic_motion_example_02.json文件就是工作流,我们直接将这个json文件拖到comfyui操作界面即可打开工作流。


5.如果打开节点有报错,就要安装相对应的节点,例如video节点报错,在管理器搜索videohelpersuite进行安装。


打开管理器

搜索缺失节点

安装成功会进行重启,会发现报错消失,以此类推,后面的报错插件依次按照这个方法解决。



安装stable-video-diffusion-img2vid-xt-1-1

没有报错以后介绍如何安装大模型找到readme.md文件,打开后后介绍如何下载安装

在根目录下找到models文件夹,进入后新建“mimicmotion”文件夹。

需要魔法访问https://huggingface.co/Kijai/MimicMotion_pruned/tree/main

在\comfyui\models文件夹下新建diffusers文件夹

在\ComfyUI\models\diffusers\文件下安装stable-video-diffusion-img2vid-xt-1-1 相关文件。

因为上述地址需要魔法,在码云平台有这个
Hugging Face 模型镜像,克隆到diffusers文件夹下

可以通过在diffusers文件夹下进入cmd终端通过以下命令直接克隆到当前文件夹下,这种操作可以确保文件的完整性。

码云https://gitee.com/hf-models/stable-video-diffusion-img2vid-xt-1-1

安装DWPose

在目录ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\models文件夹下新建DWPose文件夹

码云https://gitee.com/hf-models/DWPose  


通过cmd进行下载

下载MimicMotion_1-1.pth

https://gitee.com/hf-models/MimicMotion对MimicMotion_1-1.pth进行下载 ,存放位置。


操作完以上流程,就可以打开制作视频,如果出现mimicmotionwrapper报错紫色时,显示报错结果是DWPose的时候,在管理器搜索DWPose下载相关插件



如运行提示缺少yolox_l.torchscript.pt和dw-ll_ucoco_384_bs5.torchscript.pt时,可以通过必应直接搜索进行下载。

https://huggingface.co/hr16/yolox-onnx/blob/main/yolox_l.torchscript.pt
https://huggingface.co/hr16/DWPose-TorchScript-BatchSize5/blob/main/dw-ll_ucoco_384_bs5.torchscript.pt

如出现以下情况时,大部分是网络原因造成,无法访问外网造成的,我们需要对起启动器进行代理配置。

出现mimicmotionmodel报错是因为网络问题,无法下载相关模型,在启动器的设置中,将配置模式新手改为专家。

将代理设置打开,将下方全部勾选全部打开


重启秋叶启动器,运行程序,会发现后台在自动下载确实文件和模型。

如果出现报错大部分原因是因为网络问题造成的文件或者模型没有下载成功导致的文件缺失。

相关推荐

Luminati代理动态IP教程指南配置代理VMLogin中文版反指纹浏览器

介绍如何使用在VMLogin中文版设置Luminati代理。首先下载VMLogin中文版反指纹浏览器(https://cn.vmlogin.com)对于刚接触Luminati动态ip的朋友,是不是不懂...

文档中图形及子图形的处理(word中的图形对象有何特点)

【分享成果,随喜正能量】走得越远,见识越多,认识的人越多,你就越能体会到,人这一辈子,你真的在意的,同时又在意你的人,就那么几个,这几个人,就是你全部的世界。三两知己,爱人在侧,父母康健,听起来平淡无...

Python爬虫破解滑动验证码教程(python绕过滑动验证码)

破解滑动验证码通常需要结合图像识别和模拟人类操作,以下是分步骤的解决方案:1.分析验证码类型缺口识别型:背景图带缺口,滑块图带凸块轨迹验证型:除了位置还需模拟人类移动轨迹2.获取验证码图片方法一:...

「教程」5 分钟带你入门 kivy(新手kp教学)

原创:星安果AirPythonkivy语言通过编写界面UI,然后利用Python定义一些业务逻辑,可以移植很多功能模块到移动端直接执行。下面对kivy常见用法做一个汇总。1、什么是...

比呀比: Fossil Estate Canvas EW 男式复古邮差包 $70.99

Fossil是一个来自美国的全球性生活时尚品牌,始建于1984年,专注于时尚配件,是第一个将手表的价值与款式完美结合的美国品牌,如今Fossil已跃身成为美国最受欢迎的品牌之一。这款FossilE...

智能教学:如何在网上授课(网上授课怎么弄)

摘要:因为担心传统课堂可能会传播冠状病毒,许多大学已经开始在网上授课。耶鲁-新加坡国立大学的讲师凯瑟琳·谢伊·桑格(CatherineSheaSanger)解释了如何快速而有效地做到这一点。当新型冠...

wxPython库教程系列之图片:托盘图标和图片缩放、移动

1概要:=====1.1托盘图标设置1.2普通图片显示:原图显示,缩放显示,窗口与图片大小相互适应。1.3按钮图片设置1.4移动图片和zoom菜单按钮联动设置2托盘图标:========2...

UE4渲染目标开发教程(ue4渲染效果图质量怎么样)

渲染目标(RenderTarget)是你可以在运行时写入的纹理。在引擎方面,它们存储基础颜色、法线和环境光遮蔽等信息。在用户方面,渲染目标主要用作一种辅助相机。你可以将场景捕捉指向某物并将图像存储到...

比呀比: Fossil 化石 Canvas NS 男士复古帆布斜挎包 $57.59

FossilCanvasNS男士复古帆布斜挎包,尺寸约为26.5*11*33厘米。采用100%纯棉帆布面料,融合了休闲与百搭的外形,在经典的款型呈现复古质感。内设1个拉链袋,2个搭扣数码产品袋和...

比呀比: Timberland 添柏岚 Canvas Cord Case 帆布旅行手包 $5.99

Timberland添柏岚这款耐用帆布旅行手包,虽然一眼过去,觉得不咋地,但是品牌和质量还是妥妥滴,非常适合装一些零零碎碎的小东西,便于携带,多色可选,重点是价格更是感动价啊。目前这款包在6pm报价...

提炼文章/知识资料,两键转换成小红书图片

现在AI的功能已经越来越强大了,通过AI可以提高我们不少工作效率。刚好前几天做了一个几乎“一气呵成”,把长文章转成小红书卡片的流程Demo,分享给大家。之前发过两篇利用AI把长文章转成小红书图片...

python海龟绘图turtle(一):画布和窗体

海龟绘图(turtle)是python的一个有趣的内置模块,是python语言的标准库之一,是入门级的图形绘制函数库。海龟绘图(turtle)可以根据编写的控制指令(代码),让一个小“海龟”在屏幕上来...

在文档中添加画布及图片(word中如何添加画布)

【分享成果,随喜正能量】宁可正而不足,不可邪而有余。相识满天下,知心能几人。书七成,戏三分,牛皮灯影胡编成。布施不如还债,修福不如避祸。勿以恶小而为之,勿以善小而不为。。《VBA之Word应用》,是我...

知识管理神器 Obsidian,终于有了白板功能!

沙牛提示阅读本文需要3分钟,Obsidian白板功能来了!如果你喜欢本文,就分享给你的小伙伴!01白板继双链笔记之后,这一年,白板类工具开始火了起来。顾名思义,白板类工具,它给了你一张无限尺寸...

虚拟背景第一弹!教你如何在家中优雅地“学在交大”!

交大将于3月2日正式开始线上教学(3月1日举行线上教学第一课|视频直播课)目前正处于网课试课阶段交大在线课程教学以ZOOM、Canvas等作为主平台平台的虚拟背景功能可以具特别的环境效果更好地沉浸课堂...