Meta 推出音频转图像 AI 框架，用于生|成人|物对话场景的配音

---

it之家 1 月 9 日消息，meta 日前公布了一项名为 audio2photoreal 的 ai 框架，该框架能够生成一系列逼真的 npc 人物模型，并借助现有配音文件自动为人物模型“对口型”“摆动作”。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

▲ 图源 Meta 研究报告（下同）

IT之家从官方研究报告中得知，Audio2photoreal 框架在接收到配音文件后，首先生成一系列 NPC 模型，之后利用量化技术及扩散算法生成模型用动作，其中量化技术为框架提供动作样本参考、扩散算法用于改善框架生成的人物动作效果。

研究人员提到，该框架可以生成 30 FPS 的“高质量动作样本”，还能模拟人类在对话中“手指点物”、“转手腕”或“耸肩”等不由自主的“习惯性动作”。

TTSMaker

TTSMaker是一个免费的文本转语音工具，提供语音生成服务，支持多种语言。

2275 查看详情

研究人员援引自家实验结果，在对照实验中有 43% 的评估者对框架生成的人物对话场景感到“强烈满意”，因此研究人员认为 Audio2photoreal 框架相对于业界竞品能够生成“更具动态和表现力”的动作。

据悉，研究团队目前已经在 GitHub 公开了相关代码和数据集，感兴趣的小伙伴可以点此访问。

以上就是Meta 推出音频转图像 AI 框架，用于生|成人|物对话场景的配音的详细内容，更多请关注其它相关文章！

# 之家  # 唐山seo技巧  # 赞皇竞价网站推广方法  # 山西seo推广怎么引流  # 自贡网站seo优化  # seo基本策略  # 福州医院网站建设  # 网站建设营销推广策略  # 胶南网站建设服务  # 解决问题  # 中文网  # 相关文章  # 点此  # 感兴趣  # 中有  # 还能  # 是一个  # 研究报告  # udio  # 阜阳粮油网站建设  # 第一营销推广软件 

相关栏目： 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894 】

相关推荐： 遵义市首次引入手术机器人，成功实施全膝关节置换术  三个全球首创，青岛西海岸新区“海元宇宙”亮相世界人工智能大会  人工智能和神经网络有什么联系与区别？  Nature发AIGC禁令！投稿中视觉内容使用AI的概不接收  科普：什么是AI大模型  当一切设备都受到人工智能的控制  上影节直击 | AI技术降低了短片拍摄门槛？金爵奖评委不赞同  新华全媒+｜AI：当心，我可能欺骗了你！  IBM CEO克里希纳：人工智能潜在创新无法被监管  如何提高集群协作效率？中外团队合作研发基于均值偏移的机器人队形控制策略  旷视入选北京市通用人工智能产业创新伙伴计划  国内通用人形机器人将发布、产业加速突破  一文看懂基础模型的定义和工作原理  优化J*a与MySQL合作：分享批处理操作的技巧  探展WAIC |万向区块链杜宇：不存在单一技术的iPhone时刻，Web3.0核心将基于AI+区块链+物联网  奥比中光子公司和斯坦德机器人深度合作，共同推进新一代激光雷达的研发  GPT-4是如何工作的？哈佛教授亲自讲授  视觉中国宣布推出AI灵感绘图、画面扩展功能  国产医疗企业的人工智能  英媒：硅谷有些人太鼓吹AI，宣扬“学习无用”  到中国科技馆体验“一滴油的奇妙旅行”，线上元宇宙展厅同步开启  「电子果蝇」惊动马斯克！背后是13万神经元全脑图谱，可在电脑上运行  软银、淡马锡、沙特阿美突击入股，“协作机器人第一股”节卡股份：强敌环伺，持续失血是常态  智能机器人正在彻底改变客户服务  官宣！爱康AI未来之夜三大亮点提前剧透！  报告称 70% 程序员已使用各种 AI 工具编程  鉴智机器人发布基于地平线征程5的标准视觉感知产品  世界上第一个完全由人工智能驱动的图像编辑器！  利用AI技术更好地发展农村电商  AI大举入侵内容行业，哪些上市*及动漫公司进行了布局？  套娃不可取：研究人员证实用AI生成的结果训练AI将导致模型退化  酒店业将如何受益于人工智能的改变？  人工智能快速发展 打开就业新空间  智能化解决方案：保障数据安全阻击泄露和丢失  郭帆谈ChatGPT：电影行业需要创新，否则人工智能将让电影变得平庸  GPT-4使用混合大模型？研究证明MoE+指令调优确实让大模型性能超群  Xreal AR 眼镜用投屏盒子 Beam 发布：分体式设计，到手 699 元  机构：边缘AI或是当前预期差最大的AI方向  “踩油门，也要会踩刹车” 互联网企业高管谈人工智能发展  插画师对AI绘画软件的态度是怎样的？  一公司推出喷火机器狗，可喷出 9 米长火焰  马斯克反讽人工智能AI炒作：“机器学习”本质就是统计  人脸识别+全景双摄+AI算法 萤石推动智能锁行业革新  警惕！AI或致虚假信息泛滥  Meta开源文本生成音乐大模型，我们用《七里香》歌词试了下  腾讯机器狗进化：通过深度学习掌握自主决策能力  全国青少年无人机大赛重庆市选拔赛开赛 1252名中小学生参加  AI取代人工先拿教育行业开刀？美版“作业帮”启动裁员  XREAL Beam 投屏盒子正式发布：支持“可悬停 AR 空间屏”  了解 AGI：智能的未来？ 

 2024-01-13