前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >预训练模型助力,真实动画视频生成 | 开源专题 No.92

预训练模型助力,真实动画视频生成 | 开源专题 No.92

作者头像
小柒
发布2024-06-25 08:42:01
990
发布2024-06-25 08:42:01
举报
文章被收录于专栏:开源服务指南开源服务指南

HumanAIGC/AnimateAnyonehttps://github.com/HumanAIGC/AnimateAnyone

Stars: 14.0k License: Apache-2.0

AniamteAnyone 是一个用于角色动画的一致且可控的图像到视频合成工具。

  • 提供了一致和可控的图像到视频合成功能
  • 支持角色动画
  • 可以生成高质量的视频输出

OpenTalker/SadTalkerhttps://github.com/OpenTalker/SadTalker

Stars: 10.8k License: NOASSERTION

SadTalker 是一个基于音频驱动的单幅图像对话头像动画生成项目。它可以将单幅人像图像与音频结合,生成逼真的视频对话头像。该项目的主要功能和核心优势包括:

  • 支持单幅图像加音频生成对话头像视频。
  • 通过 Discord 整合,用户可以免费使用,也可以通过发送文件或文本提示生成高质量视频。
  • 提供稳定的扩散 WebUI 扩展,支持全图模式。
  • 不断更新版本,增加新特性,修复 Bug,优化性能。
  • 提供了详细的安装教程和社区教程,覆盖多种操作系统。
  • 支持模型下载脚本,提供预训练模型,同时提供离线模型供用户选择。

magic-research/magic-animatehttps://github.com/magic-research/magic-animate

Stars: 9.9k License: BSD-3-Clause

这个项目是 MagicAnimate,它使用扩散模型实现了时间一致的人体图像动画。该项目提供了预训练基础模型和 MagicAnimate 检查点,并支持单 GPU 和多 GPU 推断。此外,还提供在线 Gradio 演示以及本地 Gradio 演示功能。

  • 提供预训练基础模型
  • 支持单 GPU 和多 GPU 推断
  • 在线/本地 Gradio 演示

OpenTalker/video-retalkinghttps://github.com/OpenTalker/video-retalking

Stars: 5.8k License: Apache-2.0

VideoReTalking 是一个用于在野外环境中编辑真实人物头部视频的系统。其主要功能包括根据输入音频修改面部表情、生成与音频同步的嘴唇动作以及提高合成脸部图像逼真度等。该项目具有以下核心优势和特点:

  • 通过学习方法解决了三个任务,可以无需用户干预地按顺序处理所有模块。
  • 提供了预训练模型,并且支持快速推理,不需要手动对齐数据。
  • 可控制表情并改变上半脸的表达方式。

Zejun-Yang/AniPortraithttps://github.com/Zejun-Yang/AniPortrait

Stars: 4.0k License: Apache-2.0

AniPortrait 是一个通过音频驱动合成逼真肖像动画的开源项目。

  • 提供高质量的由音频和参考肖像图像驱动的动画生成框架
  • 支持提供视频实现面部重现
  • 发布了 Gradio 演示,支持 HuggingFace Spaces 上的在线演示
  • 提供各种生成视频功能,包括自主驾驶、面部重现、音频驱动等
本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2024-06-17,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 开源服务指南 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • HumanAIGC/AnimateAnyonehttps://github.com/HumanAIGC/AnimateAnyone
  • OpenTalker/SadTalkerhttps://github.com/OpenTalker/SadTalker
  • magic-research/magic-animatehttps://github.com/magic-research/magic-animate
  • OpenTalker/video-retalkinghttps://github.com/OpenTalker/video-retalking
  • Zejun-Yang/AniPortraithttps://github.com/Zejun-Yang/AniPortrait
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档