LinGen— Meta联合普林斯顿大学推出的文本到视频生成框架


lingen是由普林斯顿大学与meta联合开发的一种全新的文本生成视频框架。该框架采用线性复杂度的mate模块(包含ma-branch和te-branch),取代传统diffusion transformers中计算复杂的自注意力机制,从而实现在单个gpu上高效生成高分辨率、长时间段的视频内容。lingen在降低计算开销的同时保持高质量输出,在视频质量和生成效率方面均优于现有先进模型,为长视频生成及实时交互式应用提供了新方向。

Writer Writer

企业级AI内容创作工具

Writer 220 查看详情 Writer

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

LinGen— Meta联合普林斯顿大学推出的文本到视频生成框架LinGen的核心功能

  • 高分辨率视频生成:支持生成如512p、1024p等高清视频,满足专业级内容创作需求。
  • 长时长视频输出:可生成分钟级别的视频,突破以往只能生成10-20秒短视频的限制。
  • 线性复杂度结构:基于MATE模块实现线性计算复杂度,显著减少资源消耗,适合在单一GPU设备上运行。
  • 优质视频表现:生成的视频在画面质量、文字匹配和帧间连贯性方面表现优异。
  • 支持实时交互生成:具备实时生成与编辑能力,适用于多种动态内容制作场景。

LinGen的技术架构

  • MA-branch(多尺度注意力分支)
    • 双向Mamba2模块:采用高效的线性序列模型Mamba2,并通过双向设计捕捉序列中的前后依赖关系。
    • Rotary Major Scan(RMS):通过不同扫描方式(如空间行优先、列优先,时间行优先、列优先)重新排列3D视频token张量,增强局部相关性并降低延迟。
    • Review Tokens:在处理前添加平均池化token,提供整体序列概览,强化远距离关联。
  • TE-branch(时间注意力分支):将3D视频token划分为窗口并在窗口内计算自注意力,TESA机制能捕捉空间邻近与时间中距token之间的联系;窗口在各层之间交替移动以扩大感受野,提升视频一致性。
  • 线性计算优化:得益于MATE模块的设计,LinGen的计算复杂度与像素数量呈线性增长,而非传统模型的二次增长,极大提升了生成效率。
  • 渐进训练策略:首先在低分辨率图像任务上预训练,随后逐步提升视频分辨率与时长进行训练;结合图文对混合训练,提高视频连贯性;最终在高质量视频数据集上微调,进一步优化输出效果。

LinGen的项目信息

  • 项目官网:https://www.php.cn/link/407c334809565d941338efc9e3a9f687
  • GitHub仓库:https://www.php.cn/link/3f1176741b1b079bdc7a2e7f208c902f
  • 技术论文链接:https://www.php.cn/link/4c2aeb849fab47239887f8bf9c8e6278

LinGen的应用领域

  • 内容创作:用于快速生成电影、电视剧、广告等内容,缩短制作周期并降低成本。
  • 游戏娱乐:生成游戏过场动画和背景视频,增强视觉沉浸感。
  • 教育与培训:制作教学视频和实验演示,提高学习趣味性和互动性;为企业员工培训提供直观的学习材料。
  • 广告营销:快速生成多样化广告视频,适应不同投放场景,提升传播效率。
  • 艺术创意:作为新型创作工具,为艺术家提供灵感激发和视频艺术表达的新方式。

以上就是LinGen— Meta联合普林斯顿大学推出的文本到视频生成框架的详细内容,更多请关注其它相关文章!


# 相关文章  # 福建推广营销选哪家  # 苏州抖音seo团队  # 莲湖区营销策划推广  # 南京整合营销推广公司  # 云南seo教程推荐公司  # 郑州seo网络推广培训  # 站外推广网站图片大全  # 网页优化关键词排名上升  # 日照seo推广  # 黄冈网站建设优化技术  # 中文网  # git  # 并在  # 适用于  # 是由  # 安装包  # 时长  # 一键  # 高质量  # 普林斯顿  # 排列  # 工具 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: 全面拥抱大模型浪潮,ISC 2025打造全球首场AI数字安全峰会  技术如何使人变得懒惰?  OpenAI 静默关闭 AI 文本检测工具,准确率仅为 26%  美妆行业在AI时代蓬勃发展  丰田汽车研究院推出生成式人工智能汽车设计工具  赋能金融新生态,多家银行创新应用成果亮相世界人工智能大会  贫穷让我预训练  AI在教育中的角色:AI如何改变我们的学习方式  云米Smart 2E AI立式空调开启预售:新三级能效,到手价3899元  AI技术改变*,新骗局来袭,*成功率接近100%  如何提高集群协作效率?中外团队合作研发基于均值偏移的机器人队形控制策略  你大脑中的画面,现在可以高清还原了  套娃不可取:研究人员证实用AI生成的结果训练AI将导致模型退化  上新7款产品,美图继续“蹭”AI  加州用AI监测野火:1032个摄像头联网扫描森林异常  通用医疗人工智能如何革新医疗行业?  阿里达摩院向公众免费开放100项AI专利许可  可按用户语气自动回复消息,Zoom 推出基于生成式 AI 的新功能  「社交达人」GPT-4!解读表情、揣测心理全都会  马斯克发推讽刺人工智能:机器学习的本质就是统计  在这里见未来!杭州未来科技城全球AI盛会邀您共探最前沿  焊接协作机器人或将成为26届埃森展最大看点  25个AI智能体源码现已公开,灵感来自斯坦福的「虚拟小镇」和《西部世界》  字节、网易相继入局,AI之后大厂又找到下一个风口?  普林斯顿Infinigen矩阵开启!AI造物主100%创造大自然,逼真到炸裂  微软在 Build 大会上宣布的新 Microsoft Store AI Hub 现已开始推出  构建数字文旅新高地!洛阳涧西区开启元宇宙时代  Meta推出VR订阅服务Quest +:每月免费玩两款游戏,7.99美元/月  Databricks 发布大数据分析平台 Spark 用 AI 模型 SDK:一键生成 SQL 及 FySpark 语言图表代码  GPT-4不能在麻省理工学院获得计算机科学学位  此「错」并非真的错:从四篇经典论文入手,理解Transformer架构图「错」在何处  2025世界人工智能大会(上海)开幕式纪要  生成式AI对云运维的3大挑战  奥比中光子公司和斯坦德机器人深度合作,共同推进新一代激光雷达的研发  全国体育人工智能大会举办,专家聚焦体育人工智能领域人才培养  OpenAI大神Karpathy最新分享:为什么OpenAI内部对AI Agents最感兴趣  无需照相馆,AI证件照生成软件即将推出  ChatGPT会成为你家新的语音助手吗?  如布AI口袋学习机S12 将亮相综艺节目《好样的!国货》  关于开展“与AI共创未来”——2025年全国青少年人工智能创新实践活动的通知  MiracleVision视觉大模型上线时间  AI与5G的强强联合:唤醒数字时代的无尽潜能  美图公司:Wink国内首发AI画面拓展功能  爱设计 AI 一键生成 PPT 工具上线:输入标题即可生成 PPT  生成式AI爆发,亚马逊云科技持续专注创新,助力企业数字化转型  抢占新赛道 加快机器人产业集聚发展  VMS的应用:提升多品牌设备管理效能  先进技术在防止全球数据丢失方面的作用  利用AI探索抗体“钥匙”、加速药物研发——访百图生科团队  "探索Meta发布的Quest MR/VR视频录制与拍摄指南" 

 2025-06-21

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.