百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

comfyui安装MimicMotion扩展,AI跳舞动作模仿

myzbx 2025-03-30 19:10 203 浏览

一张照片生成一段跳舞的视频,在视频平台是很火爆的内容,简单来带大家来了解一下是如何通过工具实现的。

所需的工具是comfyui秋叶版本,我选择秋叶版的原因是从秋叶版的stable diffustion走过来的,对秋叶启动器的设置和页面布局比较了解。

安装mimicmotionwapper

1.打开秋叶comfyui启动器,将核心版本升级到最新版。

2.在安装新扩展里搜索“MimicMotion”选择MimicMotionWrappe进行安装。

也可以从网址进行下载安装

https://github.com/kijai/ComfyUI-MimicMotionWrapper

3.到comfyui找到下面的路径\ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\examples\mimic_motion_example_02.json

4.这个mimic_motion_example_02.json文件就是工作流,我们直接将这个json文件拖到comfyui操作界面即可打开工作流。


5.如果打开节点有报错,就要安装相对应的节点,例如video节点报错,在管理器搜索videohelpersuite进行安装。


打开管理器

搜索缺失节点

安装成功会进行重启,会发现报错消失,以此类推,后面的报错插件依次按照这个方法解决。



安装stable-video-diffusion-img2vid-xt-1-1

没有报错以后介绍如何安装大模型找到readme.md文件,打开后后介绍如何下载安装

在根目录下找到models文件夹,进入后新建“mimicmotion”文件夹。

需要魔法访问https://huggingface.co/Kijai/MimicMotion_pruned/tree/main

在\comfyui\models文件夹下新建diffusers文件夹

在\ComfyUI\models\diffusers\文件下安装stable-video-diffusion-img2vid-xt-1-1 相关文件。

因为上述地址需要魔法,在码云平台有这个
Hugging Face 模型镜像,克隆到diffusers文件夹下

可以通过在diffusers文件夹下进入cmd终端通过以下命令直接克隆到当前文件夹下,这种操作可以确保文件的完整性。

码云https://gitee.com/hf-models/stable-video-diffusion-img2vid-xt-1-1

安装DWPose

在目录ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\models文件夹下新建DWPose文件夹

码云https://gitee.com/hf-models/DWPose  


通过cmd进行下载

下载MimicMotion_1-1.pth

https://gitee.com/hf-models/MimicMotion对MimicMotion_1-1.pth进行下载 ,存放位置。


操作完以上流程,就可以打开制作视频,如果出现mimicmotionwrapper报错紫色时,显示报错结果是DWPose的时候,在管理器搜索DWPose下载相关插件



如运行提示缺少yolox_l.torchscript.pt和dw-ll_ucoco_384_bs5.torchscript.pt时,可以通过必应直接搜索进行下载。

https://huggingface.co/hr16/yolox-onnx/blob/main/yolox_l.torchscript.pt
https://huggingface.co/hr16/DWPose-TorchScript-BatchSize5/blob/main/dw-ll_ucoco_384_bs5.torchscript.pt

如出现以下情况时,大部分是网络原因造成,无法访问外网造成的,我们需要对起启动器进行代理配置。

出现mimicmotionmodel报错是因为网络问题,无法下载相关模型,在启动器的设置中,将配置模式新手改为专家。

将代理设置打开,将下方全部勾选全部打开


重启秋叶启动器,运行程序,会发现后台在自动下载确实文件和模型。

如果出现报错大部分原因是因为网络问题造成的文件或者模型没有下载成功导致的文件缺失。

相关推荐

IT之家学院:如何修改Win10 Edge浏览器下载路径?

IT之家讯目前Win10Edge浏览器的默认下载路径不可修改,只能是系统“下载”文件夹,虽然用户可以通过移动该文件夹位置来间接达到修改目的,但Edge浏览器本身却无法修改。不过我们可以通过修改注册表...

Win 10自带Edge浏览器史上最强,好内核配了滥界面

微软在Win10上为我们带来了全新的Edge浏览器,而跌落神坛的IE正式被微软抛弃!随着Win10周年版更新的到来,Edge浏览器也带来了很多全新的特性,功能也更加完善!这让微软信心大增,微软甚...

Win10全新浏览器Microsoft Edge图标:致敬IE

IT之家讯今天早些时候,微软宣布了斯巴达(Spartan)浏览器项目的官方命名,微软在Windows10上集成的新浏览器的内核名为Edge,所以大家一定猜到了,它被命名为MicrosoftEdge...

Edge 84稳定版发布:优化集锦 默认禁用TLS 1.0/1.1

时隔6周时间,Edge浏览器的最新稳定版v84.0.522.40正式发布。新版本为IE模式改善了站点列表下载时间,在“以管理员身份运行”运行时允许用户登录浏览器等等。下载地址:https...

真相:Win10微软Edge和IE11浏览器图标相似的原因

IT之家讯5月7日消息,微软在Build2015大会上公布了Win10斯巴达浏览器的正式名称“MicrosoftEdge”以及正式图标,蓝色的“e”。这款新浏览器的图标让各位Windows老用户...

微软 Win11,20 多年来首个没有 IE 浏览器的 Windows 版本

IT之家6月26日消息在Windows10的生命周期中,你可能已经安装了IE浏览器、微软Edge的经典版本,以及新的Chromium驱动的Edge浏览器。这三个浏览器完...

微软宣布2022年6月15日停止支持IE浏览器:已推出25年

5月20日消息,在推出25年之后,微软最终决定于明年停止对IE浏览器的支持。多年来,这款网络浏览器基本上没有太多消费者使用,为此微软定于2022年6月15日完全停止对其支持,转...

我采访了一位 Pornhub 工程师,聊了这些纯纯的话题

成人网站在推动Web发展方面所起到的作用无可辩驳。从突破浏览器的视频能力限制,到利用WebSocket推送广告(防止被广告拦截器拦截),你必须不断想出各种聪明的办法,让自己处在Web技术创...

如何在 Microsoft Edge 中使用IE浏览器

随着微软Windows10,Windows11的推出,IE浏览器逐渐被抛弃,可是国内一些银行和政府网站还必须使用IE才能访问,下面我来解决这个问题。首先在MicrosoftEdge中启用IE模式...

IE浏览器无法加载网站时将自动跳转到Edge中打开

来源:cnBeta.COM目前微软已经将开发重心放在基于Chromium的新版Edge浏览器上,而传统的InternetExplorer则逐渐被淘汰。也就是说,如果你当前使用的是IE...

告诉你手机信号栏中E、H、T都是什么意思!

手机信号经常会出现E啊,H啊,T啊……之类的字母,每次出现的时候小编都会自动关机,觉得手机坏掉了……ORZ……那么这些字母具体表示些什么意思呢?如果是G,那么代表的是GPRS,指2.5G网络,此时网速...

比Chrome更适合国人用 Chromium版Edge横空出世

编辑微软终于正式发布Chromium内核的Edge浏览器了。这意味着微软放弃了自研浏览器内核,Windows自带浏览器也成为了Chrome的马甲。关于微软为什么要这么做,笔者曾经撰文分析,大家可以点...

Microsoft 新浏览器 Edge 将不再支持 ActiveX、VBScript 技术

Microsoft继宣布将推出将取代IE的全新浏览器Edge后,日前又再宣布Edge不会支持沿用以久的ActiveX、VBScript与BrowerHelperObjects(...

隐藏功能超炫酷 新版Edge浏览器还能这么玩

基于Chromium的新版Edge浏览器已经开放测试,但由于是测试期,可供用户选择的功能还比较少。不过有一部分功能已经内置到浏览器中,只是尚未开放而已。这就像汽车里的刷EPU一样,没事自己玩一玩,也是...

微软推出的新版Edge浏览器,让我抛弃用了5年的谷歌

随着新版Edge浏览器的发布,这个微软的亲儿子以崭新的面貌和大家见面啦。这次更新可谓是好评如潮,相比浏览器届的老大哥——谷歌浏览器,它少了些臃肿,但又多了一些独特的功能。今天,我就为大家介绍8...