百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

comfyui安装MimicMotion扩展,AI跳舞动作模仿

myzbx 2025-03-30 19:10 294 浏览

一张照片生成一段跳舞的视频,在视频平台是很火爆的内容,简单来带大家来了解一下是如何通过工具实现的。

所需的工具是comfyui秋叶版本,我选择秋叶版的原因是从秋叶版的stable diffustion走过来的,对秋叶启动器的设置和页面布局比较了解。

安装mimicmotionwapper

1.打开秋叶comfyui启动器,将核心版本升级到最新版。

2.在安装新扩展里搜索“MimicMotion”选择MimicMotionWrappe进行安装。

也可以从网址进行下载安装

https://github.com/kijai/ComfyUI-MimicMotionWrapper

3.到comfyui找到下面的路径\ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\examples\mimic_motion_example_02.json

4.这个mimic_motion_example_02.json文件就是工作流,我们直接将这个json文件拖到comfyui操作界面即可打开工作流。


5.如果打开节点有报错,就要安装相对应的节点,例如video节点报错,在管理器搜索videohelpersuite进行安装。


打开管理器

搜索缺失节点

安装成功会进行重启,会发现报错消失,以此类推,后面的报错插件依次按照这个方法解决。



安装stable-video-diffusion-img2vid-xt-1-1

没有报错以后介绍如何安装大模型找到readme.md文件,打开后后介绍如何下载安装

在根目录下找到models文件夹,进入后新建“mimicmotion”文件夹。

需要魔法访问https://huggingface.co/Kijai/MimicMotion_pruned/tree/main

在\comfyui\models文件夹下新建diffusers文件夹

在\ComfyUI\models\diffusers\文件下安装stable-video-diffusion-img2vid-xt-1-1 相关文件。

因为上述地址需要魔法,在码云平台有这个
Hugging Face 模型镜像,克隆到diffusers文件夹下

可以通过在diffusers文件夹下进入cmd终端通过以下命令直接克隆到当前文件夹下,这种操作可以确保文件的完整性。

码云https://gitee.com/hf-models/stable-video-diffusion-img2vid-xt-1-1

安装DWPose

在目录ComfyUI-aki-v1.3\custom_nodes\ComfyUI-MimicMotionWrapper\models文件夹下新建DWPose文件夹

码云https://gitee.com/hf-models/DWPose  


通过cmd进行下载

下载MimicMotion_1-1.pth

https://gitee.com/hf-models/MimicMotion对MimicMotion_1-1.pth进行下载 ,存放位置。


操作完以上流程,就可以打开制作视频,如果出现mimicmotionwrapper报错紫色时,显示报错结果是DWPose的时候,在管理器搜索DWPose下载相关插件



如运行提示缺少yolox_l.torchscript.pt和dw-ll_ucoco_384_bs5.torchscript.pt时,可以通过必应直接搜索进行下载。

https://huggingface.co/hr16/yolox-onnx/blob/main/yolox_l.torchscript.pt
https://huggingface.co/hr16/DWPose-TorchScript-BatchSize5/blob/main/dw-ll_ucoco_384_bs5.torchscript.pt

如出现以下情况时,大部分是网络原因造成,无法访问外网造成的,我们需要对起启动器进行代理配置。

出现mimicmotionmodel报错是因为网络问题,无法下载相关模型,在启动器的设置中,将配置模式新手改为专家。

将代理设置打开,将下方全部勾选全部打开


重启秋叶启动器,运行程序,会发现后台在自动下载确实文件和模型。

如果出现报错大部分原因是因为网络问题造成的文件或者模型没有下载成功导致的文件缺失。

相关推荐

如何设计一个优秀的电子商务产品详情页

加入人人都是产品经理【起点学院】产品经理实战训练营,BAT产品总监手把手带你学产品电子商务网站的产品详情页面无疑是设计师和开发人员关注的最重要的网页之一。产品详情页面是客户作出“加入购物车”决定的页面...

怎么在JS中使用Ajax进行异步请求?

大家好,今天我来分享一项JavaScript的实战技巧,即如何在JS中使用Ajax进行异步请求,让你的网页速度瞬间提升。Ajax是一种在不刷新整个网页的情况下与服务器进行数据交互的技术,可以实现异步加...

中小企业如何组建,管理团队_中小企业应当如何开展组织结构设计变革

前言写了太多关于产品的东西觉得应该换换口味.从码农到架构师,从前端到平面再到UI、UE,最后走向了产品这条不归路,其实以前一直再给你们讲.产品经理跟项目经理区别没有特别大,两个岗位之间有很...

前端监控 SDK 开发分享_前端监控系统 开源

一、前言随着前端的发展和被重视,慢慢的行业内对于前端监控系统的重视程度也在增加。这里不对为什么需要监控再做解释。那我们先直接说说需求。对于中小型公司来说,可以直接使用三方的监控,比如自己搭建一套免费的...

Ajax 会被 fetch 取代吗?Axios 怎么办?

大家好,很高兴又见面了,我是"高级前端进阶",由我带着大家一起关注前端前沿、深入前端底层技术,大家一起进步,也欢迎大家关注、点赞、收藏、转发!今天给大家带来的主题是ajax、fetch...

前端面试题《AJAX》_前端面试ajax考点汇总

1.什么是ajax?ajax作用是什么?AJAX=异步JavaScript和XML。AJAX是一种用于创建快速动态网页的技术。通过在后台与服务器进行少量数据交换,AJAX可以使网页实...

Ajax 详细介绍_ajax

1、ajax是什么?asynchronousjavascriptandxml:异步的javascript和xml。ajax是用来改善用户体验的一种技术,其本质是利用浏览器内置的一个特殊的...

6款可替代dreamweaver的工具_替代powerdesigner的工具

dreamweaver对一个web前端工作者来说,再熟悉不过了,像我07年接触web前端开发就是用的dreamweaver,一直用到现在,身边的朋友有跟我推荐过各种更好用的可替代dreamweaver...

我敢保证,全网没有再比这更详细的Java知识点总结了,送你啊

接下来你看到的将是全网最详细的Java知识点总结,全文分为三大部分:Java基础、Java框架、Java+云数据小编将为大家仔细讲解每大部分里面的详细知识点,别眨眼,从小白到大佬、零基础到精通,你绝...

福斯《死侍》发布新剧照 "小贱贱"韦德被改造前造型曝光

时光网讯福斯出品的科幻片《死侍》今天发布新剧照,其中一张是较为罕见的死侍在被改造之前的剧照,其余两张剧照都是死侍在执行任务中的状态。据外媒推测,片方此时发布剧照,预计是为了给不久之后影片发布首款正式预...

2021年超详细的java学习路线总结—纯干货分享

本文整理了java开发的学习路线和相关的学习资源,非常适合零基础入门java的同学,希望大家在学习的时候,能够节省时间。纯干货,良心推荐!第一阶段:Java基础重点知识点:数据类型、核心语法、面向对象...

不用海淘,真黑五来到你身边:亚马逊15件热卖爆款推荐!

Fujifilm富士instaxMini8小黄人拍立得相机(黄色/蓝色)扫二维码进入购物页面黑五是入手一个轻巧可爱的拍立得相机的好时机,此款是mini8的小黄人特别版,除了颜色涂装成小黄人...

2025 年 Python 爬虫四大前沿技术:从异步到 AI

作为互联网大厂的后端Python爬虫开发,你是否也曾遇到过这些痛点:面对海量目标URL,单线程爬虫爬取一周还没完成任务;动态渲染的SPA页面,requests库返回的全是空白代码;好不容易...

最贱超级英雄《死侍》来了!_死侍超燃

死侍Deadpool(2016)导演:蒂姆·米勒编剧:略特·里斯/保罗·沃尼克主演:瑞恩·雷诺兹/莫蕾娜·巴卡林/吉娜·卡拉诺/艾德·斯克林/T·J·米勒类型:动作/...

停止javascript的ajax请求,取消axios请求,取消reactfetch请求

一、Ajax原生里可以通过XMLHttpRequest对象上的abort方法来中断ajax。注意abort方法不能阻止向服务器发送请求,只能停止当前ajax请求。停止javascript的ajax请求...