在线教程 | 青岛小哥焦恩俊魂穿黑神话悟空？MuseV + MuseTalk打造高质量数字人

2024-08-28 03:52
文章标签 打造 数字 高质量 悟空 在线教程 小哥 青岛 神话 焦恩俊 musev musetalk

本文主要是介绍在线教程 | 青岛小哥焦恩俊魂穿黑神话悟空？MuseV + MuseTalk打造高质量数字人，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

使用传统的数字人训练方案生成一个高质量的数字人，常常需要大量的时间和算力资源，同时对训练素材的要求也较高，如果想要达到良好的唇形一致效果，通常需要数小时乃至更久。

MuseV 和 MuseTalk 的出现为数字人领域带来了新的突破，使用 MuseV 生成数字人视频后，再使用 MuseTalk 实现唇形和音频的同步，短短几分钟内即可实现完整的数字人制作。

「MuseV 不限时长的虚拟人视频生成 Demo」和「MuseTalk 高质量口型同步模型 Demo」均已上线至 OpenBayes 的公共教程模块， 已经为大家搭建好了环境，无需输入任何命令，一键克隆即可立即启动！

教程地址：

MuseV：

https://go.hyper.ai/K8qz8

MuseTalk：

https://go.hyper.ai/Ui0UA

为了让大家更好的理解，B 站 Up 主「闹闹不闹nowsmon」录制了详细的教学视频，欢迎大家一键三连哦~

https://www.bilibili.com/video/BV1fCWVeWEic/?vd_source=5e54209e1f8c68b7f1dc3df8aabf856c

Demo 运行

使用 MuseV 生成虚拟人视频

  1. 登录 hyper.ai，在「教程」页面，搜索「MuseV 不限时长的虚拟人视频生成 Demo」，点击「在线运行此教程」。

在这里插入图片描述

在这里插入图片描述

  1. 页面跳转后，点击右上角「克隆」，将该教程克隆至自己的容器中。

在这里插入图片描述

  1. 点击右下角「下一步：选择算力」。

在这里插入图片描述

  1. 页面跳转后，选择「NVIDIA RTX 4090」以及「PyTorch」镜像，点击「下一步：审核」。新用户使用下方邀请链接注册，可获得 4 小时 RTX 4090 + 5 小时 CPU 的免费时长！

HyperAI超神经专属邀请链接（直接复制到浏览器打开）：https://openbayes.com/console/signup?r=6bJ0ljLFsFh_Vvej

在这里插入图片描述

  1. 确认无误后，点击「继续执行」，等待分配资源，首次克隆需等待 2 分钟左右的时间。当状态变为「运行中」后，点击「API 地址」边上的跳转箭头，即可跳转至 Demo 页面。请注意，用户需在实名认证后才能使用 API 地址访问功能。

如果打开 API 地址显示「BadGateway」，说明模型还没有加载完毕，稍等 1-2 分钟后，再打开 API 地址即可。

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

  1. 打开 Demo 后，上传一张图片并输入 Prompt，Prompt 的格式为质量词+人物主体+动作词，例如 (masterpiece, best quality, highres:1),(1boy, solo:1),(eye blinks:1.6),(hair wave:1.3)，输入后点击「Generate」，等待片刻，即可生成视频。

在这里插入图片描述

使用 MuseTalk 实现唇形和音频同步

  1. 回到「教程」界面，打开「MuseTalk 高质量口型同步模型 Demo」，点击「在线运行此教程」。

在这里插入图片描述

在这里插入图片描述

  1. 页面跳转后，点击右上角「克隆」，将该教程克隆至自己的容器中。

在这里插入图片描述

  1. 点击右下角「下一步：选择算力」。

在这里插入图片描述

  1. 页面跳转后，依旧选择「NVIDIA RTX 4090」 和「PyTorch」镜像，点击「下一步：审核」。

在这里插入图片描述

  1. 确认无误后，点击「继续执行」，等待分配资源，首次克隆需等待 2 分钟左右的时间，待状态显示为「运行中」后，点击「API 地址」边上的跳转箭头，打开 Demo。

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

  1. 进入 MuseTalk Demo 页面，将我们刚刚制作好的视频上传后，再上传一段音频，点击「Generate」，等待一会儿，就可以看到新生成的视频中人物的唇形和音频是一致的了。

在这里插入图片描述

我们建立了「Stable Diffusion 教程交流群」，欢迎小伙伴们入群探讨各类技术问题、分享应用效果~

这篇关于在线教程 | 青岛小哥焦恩俊魂穿黑神话悟空？MuseV + MuseTalk打造高质量数字人的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/1113657。

相关文章

从去中心化到智能化：Web3如何与AI共同塑造数字生态

从去中心化到智能化：Web3如何与AI共同塑造数字生态

在数字时代的演进中，Web3和人工智能（AI）正成为塑造未来互联网的两大核心力量。Web3的去中心化理念与AI的智能化技术，正相互交织，共同推动数字生态的变革。本文将探讨Web3与AI的融合如何改变数字世界，并展望这一新兴组合如何重塑我们的在线体验。 Web3的去中心化愿景 Web3代表了互联网的第三代发展，它基于去中心化的区块链技术，旨在创建一个开放、透明且用户主导的数字生态。不同于传统
阅读更多...
usaco 1.2 Name That Number（数字字母转化）

usaco 1.2 Name That Number（数字字母转化）

巧妙的利用code[b[0]-'A'] 将字符ABC...Z转换为数字 需要注意的是重新开一个数组 c [ ] 存储字符串 应人为的在末尾附上 ‘ \ 0 ’ 详见代码： /*ID: who jayLANG: C++TASK: namenum*/#include<stdio.h>#include<string.h>int main(){FILE *fin = fopen (
阅读更多...
黑神话，XSKY 星飞全闪单卷性能突破310万

黑神话，XSKY 星飞全闪单卷性能突破310万

当下，云计算仍然是企业主要的基础架构，随着关键业务的逐步虚拟化和云化，对于块存储的性能要求也日益提高。企业对于低延迟、高稳定性的存储解决方案的需求日益迫切。为了满足这些日益增长的 IO 密集型应用场景，众多云服务提供商正在不断推陈出新，推出具有更低时延和更高 IOPS 性能的云硬盘产品。 8 月 22 日 2024 DTCC 大会上（第十五届中国数据库技术大会），XSKY星辰天合正式公布了基于星
阅读更多...
如何用GPU算力卡P100玩黑神话悟空？

如何用GPU算力卡P100玩黑神话悟空？

精力有限，只记录关键信息，希望未来能够有助于其他人。 文章目录 综述背景评估游戏性能需求显卡需求CPU和内存系统需求主机需求显式需求 实操硬件安装安装操作系统Win11安装驱动修改注册表选择程序使用什么GPU 安装黑神话悟空其他 综述 用P100 + PCIe Gen3.0 + Dell720服务器（32C64G），运行黑神话悟空画质中等流畅运行。 背景 假设有一张P100-
阅读更多...
基于 YOLOv5 的积水检测系统：打造高效智能的智慧城市应用

基于 YOLOv5 的积水检测系统：打造高效智能的智慧城市应用

在城市发展中，积水问题日益严重，特别是在大雨过后，积水往往会影响交通甚至威胁人们的安全。通过现代计算机视觉技术，我们能够智能化地检测和识别积水区域，减少潜在危险。本文将介绍如何使用 YOLOv5 和 PyQt5 搭建一个积水检测系统，结合深度学习和直观的图形界面，为用户提供高效的解决方案。 源码地址： PyQt5+YoloV5 实现积水检测系统 预览： 项目背景
阅读更多...
pip-tools：打造可重复、可控的 Python 开发环境，解决依赖关系，让代码更稳定

pip-tools：打造可重复、可控的 Python 开发环境，解决依赖关系，让代码更稳定

在 Python 开发中，管理依赖关系是一项繁琐且容易出错的任务。手动更新依赖版本、处理冲突、确保一致性等等，都可能让开发者感到头疼。而 pip-tools 为开发者提供了一套稳定可靠的解决方案。 什么是 pip-tools？ pip-tools 是一组命令行工具，旨在简化 Python 依赖关系的管理，确保项目环境的稳定性和可重复性。它主要包含两个核心工具：pip-compile 和 pip
阅读更多...
免费也能高质量！2024年免费录屏软件深度对比评测

免费也能高质量！2024年免费录屏软件深度对比评测

我公司因为客户覆盖面广的原因经常会开远程会议，有时候说的内容比较广需要引用多份的数据，我记录起来有一定难度，所以一般都用录屏工具来记录会议内容。这次我们来一起探索有什么免费录屏工具可以提高我们的工作效率吧。 1.福晰录屏大师 链接直达：https://www.foxitsoftware.cn/REC/  录屏软件录屏功能就是本职，这款录屏工具在录屏模式上提供了多种选项，可以选择屏幕录制、窗口
阅读更多...
AIGC6: 走进腾讯数字盛会

AIGC6: 走进腾讯数字盛会

图中是一个程序员，去参加一个技术盛会。AI大潮下，五颜六色，各种不确定。 背景 AI对各行各业的冲击越来越大，身处职场的我也能清晰的感受到。 我所在的行业为全球客服外包行业。 业务模式为： 为国际跨境公司提供不同地区不同语言的客服外包解决方案，除了人力，还有软件系统。 软件系统主要是提供了客服跟客人的渠道沟通和工单管理，内部管理跟甲方的合同对接，绩效评估，BI数据透视。 客服跟客人
阅读更多...
如何打造个性化大学生线上聊天交友系统？Java SpringBoot Vue教程，2025最新设计思路

如何打造个性化大学生线上聊天交友系统？Java SpringBoot Vue教程，2025最新设计思路

✍✍计算机编程指导师 ⭐⭐个人介绍：自己非常喜欢研究技术问题！专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。 ⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！ ⚡⚡ Java实战 | SpringBoot/SSM Python实战项目 | Django 微信小程序/安卓实战项目 大数据实战项目 ⚡⚡文末获取源码 文章目录
阅读更多...
NC 把数字翻译成字符串

NC 把数字翻译成字符串

系列文章目录 文章目录 系列文章目录前言 前言 前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站，这篇文章男女通用，看懂了就去分享给你的码吧。 描述 有一种将字母编码成数字的方式：‘a’->1, ‘b->2’, … , ‘z->26’。 现在给一串数字，返回有多少种可能的译码结果 import java.u
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2