抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了


看!现在正有四位小姐姐在你面前大秀热舞:

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

以为是某些主播在短视频平台发布的作品?

No,No,No。

真实答案是:假的,生成的,而且还是只靠了一张图的那种!

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

真正的开启方式是这样的:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

这就是来自新加坡国立大学和字节跳动最新的一项研究,名叫MagicAnimate

它的作用简单来说可以总结为一个公式:一张图片 + 一组动作 = 毫无违和感的视频

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

随着这项技术的公布,科技圈内掀起了一股轩然大波,众多科技巨擘和极客们纷纷加入其中

就连HuggingFace CTO都拿自己的头像体验了一把:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

顺便还以一种幽默的方式开了个玩笑:

这算是健身了吧?我这周可以不去健身房了。

还有相当与时俱进的网友,拿着刚出炉的GTA6(侠盗猎车手6)预告片中的人物玩了一把:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

甚至连表情包都成为了网友们选择的对象......

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

MagicAnimate可以说是把科技圈的目光聚焦到了自己身上,因此也有网友调侃说:

OpenAI可以休息一下了。

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

火,着实是火。

一张图即可生成一段舞

MagicAnimate如此受欢迎,应该如何使用呢?

话不多说,我们现在就来手把手地体验一次。

目前,我们的项目团队已经在HuggingFace上开放了一个在线体验页面

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

操作非常简单,只需要三个步骤:

  1. 上传一张静态人物照片
  2. 上传想要生成的动作demo视频
  3. 调整参数,点击“Animate”即可

举个例子,以下是我的照片和最近全球风靡的《科目三》舞蹈片段:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

△视频源:抖音(ID:QC0217)

也可以选择页面下方提供的模版进行体验:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

不过需要注意的是,由于MagicAnimate目前过于火爆,在生成的过程中可能会出现“宕机”的情况:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

即便成功“食用”,可能也得排大队抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了……

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

(没错!截至发稿,还是没有等到结果!)

除此之外,MagicAnimate在GitHub中也给出了本地体验的方式,感兴趣的小伙伴可以试试哦~

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

那么接下来的一个问题便是:

怎么做到的?

整体而言,MagicAnimate采用的是基于扩散模型(diffusion)的一个框架,目的就是增强时间一致性、保持参考图像的真实性,并提高动画保真度。

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

为此,团队首先开发了一个视频扩散模型(Temporal Consistency Modeling)来编码时间信息。

这个模型通过在扩散网络中加入时间注意力模块,来编码时间信息,从而确保动画中各帧之间的时间一致性。

其次,为了保持帧间的外观一致性,团队引入了一种新的外观编码器(Appearance Encoder)来保留参考图像的复杂细节。

这个编码器与以往使用CLIP编码的方法有所不同,它能够提取更密集的视觉特征,以引导动画制作,从而更好地保留身份、背景和服装等信息

在这两项创新技术的基础之上,团队进一步采用了一种简单的视频融合技术(Video Fusion Technique)来促进长视频动画的平滑过渡。

最终,经过两个基准实验的验证,结果显示MagicAnimate的效果远远超过以往的方法

尤其是在具有挑战性的TikTok舞蹈数据集上,MagicAnimate在视频保真度方面比最强基线高出38%以上!

以下是团队给出的定性比较:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

并且与cross-ID的最先进的基准模型相比,我们的结果如下:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

One More Thing

不得不说,像MagicAnimate这样的项目最近真的非常受欢迎

这不,在它“出道”前不久,阿里团队也发布了一个名叫Animate Anyone的项目,同样是只要“一张图”和“想要的动作”:

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

由此,也有网友提出了疑问:

这似乎是MagicAnimate和AnimateAnyone之间的战争。谁更胜一筹?

抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了

你觉得呢?

请点击以下链接查看论文:https://arxiv.org/abs/2311.16498

以上就是抖音跳舞不用真人出镜,一张照片就能生成高质量视频!字节新技术连抱抱脸CTO都下场体验了的详细内容,更多请关注其它相关文章!


# 小红  # 抖音引流推广渠道营销  # 常德可靠营销推广方式  # 南昌手机排名seo  # yandex seo  # 西甲德比关键词排名软件  # seo排名申请设计  # 随州网站优化推广电话  # 牛牛襄阳网站seo  # 湖南核心关键词排名  # 营销推广简介  # AI  # 画出  # 受欢迎  # 一张图  # 也有  # 的是  # 出镜  # 一张照片  # 高质量  # 就能  # 智能 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: 英伟达CEO宣称生成式AI已迎来“划时代时刻”  陈丹琦ACL学术报告来了!详解大模型「*」数据库7大方向3大挑战,3小时干货满满  中国移动副总经理高同庆:打造人工智能时代的智能服务运营新范式  V社回应拒绝上架含 AI 生成内容的游戏:审核政策正在调整中  华为HarmonyOS 4将集|成人|工智能大型模型  大模型新品出现井喷,AI产业迎来新时代  为AI而服务设计:构建以人为本的AI创新方法  英伟达H100霸榜权威AI性能测试 11分钟搞定基于GPT-3的大模型训练  人形机器人打开精密齿轮市场全新空间!受益上市公司梳理  全球首款AI裸眼3D平板 国产的售价破万  AI行业盛会大咖云集!Sam Altam、“AI教父”......一文看懂最新观点  传字节内测对话式 AI 产品,代号「Grace」;马斯克嘲讽苹果 头显;比亚迪 F 品牌定名「方程豹」  城市在采用人工智能方面进展如何?  人工智能在项目管理中的作用  美版贴吧8000小组自爆停摆!拒绝数据被谷歌OpenAI白嫖,CEO被网友骂翻:背刺第三方应用  这效果能打几分?AI真人化《名侦探柯南》  日入400万,第一批AI骗子已上岗  了解 AGI:智能的未来?  出门问问亮相2025世界人工智能大会,展示AI CoPilot解决方案  探展WAIC | 第四范式“式说”聚焦toB大模型,布局生成式AI重构企业软件  1000万张照片训练AI模型 科学家找到水下定位新方法  抛媚眼给瞎子看?微软、谷歌的AI广告被广告主抵制  Meta 推出 Quest 超级分辨率技术,让 VR 画面更清晰  “思享荟”沙龙热议AIGC与元宇宙 复旦大学赵星畅谈深度数字化  Unity 内测 Safe Voice 服务,利用 AI 自动识别玩家不当聊天内容  机器人 展才能  Goodnotes 6推出,带来多项全新AI功能,让电子笔记更智能  650亿参数,8块GPU就能全参数微调:邱锡鹏团队把大模型门槛打下来了  OpenAI已向中国申请注册“GPT-5”商标,此前已在美国提交申请  干货满满,2025昆山元宇宙国际装备展等你来打卡!  北京市元宇宙产业创新中心筹建工作正式启动  AYANEO 安卓掌机 Pocket AIR 配置公布:天玑 1200 + 5.5 英寸屏  iPhone两秒出图,目前已知的最快移动端Stable Diffusion模型来了  GPT-4成功战胜AI-Guardian审核系统:谷歌研究团队的人工智能抵抗人工智能  你大脑中的画面,现在可以高清还原了  严打“黑飞”,无人机检测反制设备护航大运会净空安全  机构研选 | 虚拟电厂是电力物联网升级版 智能电网望迎来高速发展  在心理治疗中用VR技术,治疗成效显著提高  食品分销跨国企业Sysco CIDO:我们的增长秘诀是以IT为中心  调查:过半数艺术家认为 AI 作图无法帮助他们的工作  时间、空间可控的视频生成走进现实,阿里大模型新作VideoComposer火了  生成式人工智能进入产业应用!但再“聪明”仍是工具,最终目的是服务于人  衡水市冀州中学机器人社团在世界机器人大赛中斩获佳绩  有远见!华为四年前注册商标Vision Pro:苹果AR国内要改名  靠游戏更靠AI 英伟达成唯一首季度两位数增长的公司  首部国内AI辅助动画片《魔游纪:人工智能辅助篇》预告发布  再也不怕「视频会议」尬住了!谷歌CHI顶会发布新神器Visual Captions:让图片做你的字幕助手  调研海尔智家:AI名,家电命?  埃森哲俞毅:AI时代我们需要新的“摩尔定律”  Valve Index VR 头显销量下滑,上市四年的长青树渐失光彩 

 2023-12-14

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.