赞
踩
前几天,腾讯音乐娱乐Lyra实验室推出了一款非常牛逼的新工具,叫MusePose。
图片
简而言之,MusePose是一款专为虚拟人类生成设计的图像到视频生成框架。它可以根据控制信号(如姿势)生成虚拟人物的视频,实现端到端的虚拟人类生成。
我们第一时间就拿到了这个工具,并且生成了一个小姐姐跳舞的视频。只需要输入一段舞蹈姿势序列,MusePose就会开始工作,生成对应的视频。
可以理解成你只要有一张小姐姐的照片,再加上一段舞蹈姿势序列,MusePose就会哐哐给你生成一个跳舞视频。
这些效果非常惊艳,甚至可以直接用在你的自媒体短视频内容里,无需再为拍摄真人视频发愁。
MusePose的开发参考了AnimateAnyone的学术论文和Moore-AnimateAnyone的代码库,并在此基础上进行了改进和优化。主要贡献包括修复了一些重要错误,并提供了一个姿态对齐算法。
姿态驱动的视频生成:根据输入的姿态序列,生成与参考图像中人物动作一致的视频。
高质量的视频输出:生成的视频质量在同类开源模型中处于领先地位。
姿态对齐算法:允许用户将任意舞蹈视频与任意参考图像对齐。
结合MuseV和MuseTalk:构建了一个能够端到端生成具备全身运动和交互能力的虚拟人类。
MusePose的应用场景非常广泛,包括虚拟主播、影视娱乐、游戏开发和广告营销等。
学术Fun将上述工具制作成一键启动包,点击即可使用,避免大家配置环境出现各种问题,下载地址(电脑浏览器访问): 自媒体短视频神器:一键生成小姐姐跳舞视频_学术FUN,在此页面右侧区域点击下载!
注意电脑配置如下
:
windows 10/11 64位操作系统
16G显存以上英伟达显卡
下载压缩包 下载地址(电脑浏览器访问): 自媒体短视频神器:一键生成小姐姐跳舞视频_学术FUN,在此页面右侧区域点击下载!
解压,最好不要有中文路径,解压后,如下图所示,双击启动.exe
文件运行
浏览器访问http://127.0.0.1:7860/,即可在浏览器使用
MusePose的强大之处不仅在于它的技术实现,更在于它为创作者提供了无限的可能性。无论你是自媒体人、游戏开发者,还是广告创意人,都可以用它来创造出令人惊叹的内容。
总的来说,MusePose的出现,标志着虚拟人类生成技术的又一次飞跃。它不仅让创作变得更加简单高效,还为我们展示了一个充满无限可能性的未来。
以上,如果觉得不错,随手点个赞、在看、转发三连吧。如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章。
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。