DynamiCrafter ComfyUI 教程 | 对图片转视频的效果进行精细化控制

本文主要是介绍DynamiCrafter ComfyUI 教程 | 对图片转视频的效果进行精细化控制,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

近日,由北大、腾讯AI Lab联合推出的 AI 视频生成工具 DynamiCrafter 一经上线便引起了巨大反响。只需要输入一张普普通通的静态图,加上几句简单的文字引导,瞬间就能生成超逼真的动态视频,简直不要太厉害!

动图封面

静态图 + fireworks display = 过程动态图

上篇教程小贝已经带大家体验了一把 DynamiCrafter 的 WebUI 版使用方法,该方法简单易用,小白也能分分钟上手,但想要更细致地调整局部细节,WebUI 就有点局限了。

今天小贝给大家带来了 DynamiCrafter 的 ComfyUI 版使用方法,ComfyUI 基于节点式的界面和工作流,用户可以通过改变节点随心所欲地实现不同功能,能够更精细化地控制整个流程,赋予用户更高的自由度和创作空间,实现个性化定制!

但 ComfyUI DynamiCrafter 的使用门槛较高,配置过程也很复杂,用户在使用过程中还容易出现节点连接错误、内存不足、算力限制等一系列难题。

为了解决上述问题,OpenBayes平台上线了「ComfyUI DynamiCrafter 图生视频工作流」教程。该教程帮助大家提前下载模型,为用户搭建好了工作流,一键即可使用,再也不用担心节点连接错误啦!

公共教程:
https://go.openbayes.com/pyGm1

操作步骤

PART 1
Demo 运行阶段

1. 登录http://OpenBayes.com,在「公共教程」页面,选择「ComfyUI DynamiCrafter 图生视频工作流」。

2. 页面跳转后,点击右上角「克隆」,将该教程克隆至自己的容器中。

3. 点击右下角「下一步:选择算力」。

4. 跳转后,选择「NVIDIA GeForce RTX 4090」,点击「下一步:审核」。新用户使用下方邀请链接注册,可获得 4 小时 RTX 4090 + 5 小时 CPU 的免费时长!

小贝总专属邀请链接(直接复制到浏览器打开):

https://openbayes.com/console/signup?r=GraceXiii_W8qO

5. 点击「继续执行」,等待分配资源,首次克隆需等待 3-5 分钟左右的时间。当状态变为「运行中」后,点击「打开工作空间」。

若超过 10 分钟仍处于「正在分配资源」状态,可尝试停止并重启容器;若重启仍无法解决,请在官网联系平台客服。

6. 该教程包含两个工作流,下面将逐一为大家演示:

通过图片和文本提示生成视频;
通过起始帧、结束帧和提示词生成视频。

PART 2
通过图片和文本提示生成视频

1. 新建一个终端,运行「 apt-get update && apt-get install libgl1 -y --fix-missing」命令。

2. 运行「./run.sh」命令,稍等片刻,当命令行出现「https://0.0.0.0:8080」后,拷贝右侧 API 地址到浏览器地址栏中打开 Gradio 界面。请注意,用户需在实名认证后才能使用 API 地址访问功能。

3. 打开 ComfyUI 界面后,点击「Switch Locale」将语言切换成中文,随后点击「加载默认」加载图生视频工作流。

4. 上传一张图片,在文本框输入 Prompt 后(例如:a dog is driving car),点击「添加提示词队列」即可生成视频。

5. 小狗已经会开车啦。

动图封面

PART 3
通过起始帧、结束帧和提示词生成视频

1. 点击「加载」右侧的下拉箭头,选择「图到图生视频工作流」。

2. 切换工作流后,上传一张起始帧图片、一张结束图片以及 Prompt(例如:a man is walking towards a tree),点击「添加提示词队列」,即可生成视频。

动图封面

新用户福利

注册福利:点击下方邀请链接注册,即可获得 4 小时 RTX 4090 + 5 小时 CPU 的免费算力时长,永久有效!

小贝总专属邀请链接(直接复制到浏览器打开):

https://openbayes.com/console/s

这篇关于DynamiCrafter ComfyUI 教程 | 对图片转视频的效果进行精细化控制的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1029095

相关文章

JAVA读取MongoDB中的二进制图片并显示在页面上

1:Jsp页面: <td><img src="${ctx}/mongoImg/show"></td> 2:xml配置: <?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.springframework.org/schema/beans"xmlns:xsi="http://www.w3.org/2001

大语言模型(LLMs)能够进行推理和规划吗?

大语言模型(LLMs),基本上是经过强化训练的 n-gram 模型,它们在网络规模的语言语料库(实际上,可以说是我们文明的知识库)上进行了训练,展现出了一种超乎预期的语言行为,引发了我们的广泛关注。从训练和操作的角度来看,LLMs 可以被认为是一种巨大的、非真实的记忆库,相当于为我们所有人提供了一个外部的系统 1(见图 1)。然而,它们表面上的多功能性让许多研究者好奇,这些模型是否也能在通常需要系

以canvas方式绘制粒子背景效果,感觉还可以

这个是看到项目中别人写好的,感觉这种写法效果还可以,就存留记录下 就是这种的背景效果。如果想改背景颜色可以通过canvas.js文件中的fillStyle值改。 附上demo下载地址。 https://download.csdn.net/download/u012138137/11249872

echarts省份标注加散点效果

这个是安徽的效果图,鼠标移到红色标注或者对应的市区位置都会显示对应的数值。 先直接上代码: import anhuiMapJson from './anhui.json'getCoords: function(city) {var res = [];if (city != null) {for (var c in this.cityMap.features) {if (this.cityMa

Python应用开发——30天学习Streamlit Python包进行APP的构建(9)

st.area_chart 显示区域图。 这是围绕 st.altair_chart 的语法糖。主要区别在于该命令使用数据自身的列和指数来计算图表的 Altair 规格。因此,在许多 "只需绘制此图 "的情况下,该命令更易于使用,但可定制性较差。 如果 st.area_chart 无法正确猜测数据规格,请尝试使用 st.altair_chart 指定所需的图表。 Function signa

Steam邮件推送内容有哪些?配置教程详解!

Steam邮件推送功能是否安全?如何个性化邮件推送内容? Steam作为全球最大的数字游戏分发平台之一,不仅提供了海量的游戏资源,还通过邮件推送为用户提供最新的游戏信息、促销活动和个性化推荐。AokSend将详细介绍Steam邮件推送的主要内容。 Steam邮件推送:促销优惠 每当平台举办大型促销活动,如夏季促销、冬季促销、黑色星期五等,用户都会收到邮件通知。这些邮件详细列出了打折游戏、

X-AnyLabeling使用教程

1.AI 模型自动分割标注使用教程 2.AI 模型自动目标检测标注使用教程

在服务器上浏览图片

@StarSky 2018-10-26 15:09 字数 15971 阅读 28 https://www.zybuluo.com/StarSky/note/1294871 来源 2018-09-27 线上服务器安装 imgcat Tool   2018-09-27 线上服务器安装 imgcat 0. 准备文件:iterm2_shell_integration.bash1. 在有权限

Java研学-RBAC权限控制(八)

九 登录登出 1 登录作用   判断员工是否有权限访问,首先得知道现在操作的人是谁,所以必须先实现登录功能 2 登录流程   ① 提供登录页面,可输入用户名与密码信息,并添加执行登录的按钮。(登录页面不能被拦截)   ② 给按钮绑定点击事件(异步操作,POST请求)   ③ 事件中发送登录请求,使用 AJAX 方式提交。(使用 AJAX 原因:用户体验更好,既可保留用户刚输入的用户名和密码

百度OCR识别结构结构化处理视频

https://edu.csdn.net/course/detail/10506