肝出来了!AI一键生成骨骼动画Vid2DensePose懒人包来了

662 阅读3分钟

之前给大家分享了字节出品的AI项目MagicAnimate,它可以实现1张图片 + 1个骨骼动画即可生成一段舞蹈视频。很多人在玩起来后,发现骨骼动画不好获得获取,感恩Flode-Labs发布了一个可以一键生成骨骼动画的AI项目Vid2DensePose,上期发起的挑战大家很快就完成了。OK,我会出手,加班加点给大家肝出来了Vid2DensePose的懒人包,快随我去看看吧~

Vid2DensePose简介

官方介绍:Vid2DensePose 是一款功能强大的工具,旨在将DensePose模型应用于视频,为每个帧生成详细的“部分索引”可视化。该工具对于增强动画特别有用,特别是与 MagicAnimate 结合使用以实现时间一致的人体图像动画。简单来说就是为配合MagicAnimate而量身打造的项目,简直太贴心了有木有!

图片

而这个DensePose模型我也简单查了下,是meta开源的一个可区分视频内容的模型,meta这波又瑞思拜了~

离线懒人包来了

老规矩,大家自行在本地部署比较麻烦,已经为大家制作好了一款离线整合包了,关注公众号Glen并回复“Vid2DensePose”即可获得,下载到本地解压即用。

图片

大家下载解压到本地。

①双击“一键启动-Vid2DensePose.exe”。

②双击一键启动程序后,会打开一个命令提示窗口,项目会自动运行。加载成功后,复制以下网址在浏览器打开“ http://127.0.0.1:7860/”,记得点点关注不迷路哦,后续还有更多酷炫的AI项目分享~

图片

③打开链接后,即可看到Vid2DensePose主界面,作为宠粉狂魔,界面都已经为大家汉化好了:

图片

使用很简单,2步极速上手,即刻开始快乐地玩耍:

  • 上传视频:点击上传你想要制作骨骼动画的参考视频
  • 点击生成:点击submit按钮,等待即可。

图片

项目运行非常迅速,即便是很长的视频,也可以很快得到骨骼动画。我实测生成1分钟的视频,大概只需要处理10分钟左右!案例效果如下:

图片

得到骨骼动画后,大家就可以去自行去MagicAnimate里合成任何舞蹈视频了。

注意事项:

①该项目需要英伟达显卡运行,建议至少10G显存以上

②请确保安装路径不包含中文,不然可能会引起奇怪的适配问题

③建议去MagicAnimate里合成舞蹈视频时,控制视频时长在5秒左右,太长的话处理比较慢,可以长视频裁剪成多段来处理,之前分享的案例就是这样实现的,对最终视频效果没有负面影响。

感谢你看我的文章,欢迎大家继续支持我,请点赞、收藏、分享三连走一波吧~