选项
首页
新闻
美团开源 LongCat-Video-Avatar 1.5,性能优于主流闭源模型

美团开源 LongCat-Video-Avatar 1.5,性能优于主流闭源模型

2026-06-23
238

美团LongCat大模型团队正式开源了商业级数字人视频生成模型LongCat-Video-Avatar 1.5。该版本标志着模型已从开源最先进技术全面转向实际商业部署,在口型同步、物理真实感、长视频稳定性、多人互动以及高效推理等方面均有重大提升。

三大关键升级,攻克商业化难关

为了使数字人能够在各种实际应用场景中稳定运行,LongCat-Video-Avatar 1.5 通过三项全面改进,解决了传统数字人视频中存在的抖动、失真和高延迟等顽固问题:

商用级音频编码升级

该模型的音频特征提取编码器已从 Wav2Vec2 升级至Whisper-large。 凭借更多的参数和更丰富的多语言先验知识,它现在能够捕捉细微的音素变化和语调节奏。这不仅提升了长句、快速语速和演唱等复杂音频的唇形同步效果,还实现了面部表情、头部动作与语音之间的自然协调——从而显著减少了长视频中的帧跳过和身份漂移现象。

通过多阶段数据增强实现强大的开放域泛化能力

为确保在真实人物、虚拟偶像、动漫角色和动物等不同主体上都能保持稳定的性能,研究团队开发了一条集离线标注和在线验证于一体的多阶段数据处理管道,并引入了三种针对性的增强数据类型:

多人物数据:利用主动说话人检测技术,消除多人物场景中的视听歧义,准确区分说话人与听众。

静默数据:通过筛选无语音的视频,模型可学习静默状态下的自然微表情,从而避免非说话角色出现不必要的嘴部动作。

情绪数据:结合帧级情绪识别过滤,该数据整合了情绪变化,帮助模型把握言语与面部表情之间的深层关联。

基于 GRPO 的手部对齐与时间连续性

针对电商直播和产品演示等双手频繁入镜的应用场景,该模型引入了GRPO(Human Preference Alignment),该技术将奖励信号细化至帧级别,并增加了首帧手部检测机制。这大大减少了手部变形、局部结构坍塌和动作不一致等常见问题。

QQ20260522-110005.jpg

推理速度提升15倍:消除高昂的计算需求

成本是商业部署的另一个关键因素。LongCat-Video-Avatar 1.5 采用了DMD(分布式匹配蒸馏)技术,将原本 50 步的生成过程压缩至仅8 步。 此外,团队将传统的三模型并行架构替换为单个共享基础模型加多个 LoRA 适配器,从而大幅降低了 VRAM 占用量。

在实际测试中,该模型的推理速度提升了约15倍 ,仅需约一分钟即可生成一段10秒的视频。

基准评估:超越业界顶尖模型

通过 EvalTalker 基准测试,770 名评估员和 10 名领域专家对来自新闻、教育和娱乐等复杂领域的视频进行了结构化质量分析。结果表明,LongCat-Video-Avatar 1.5 在多项关键指标上表现卓越:

用户偏好胜率:其胜率比Kling Avatar2.0高出65.9%,比OmniHuman-1.5高出61. 1%,比HeyGen高出54.3%。

单人及多人场景评分:单人场景评分达到3.336,远高于HeyGen等竞争对手;多人场景评分为2.730,显著优于InfiniteTalk(2.339)。

视频稳定性:主体变形率仅为23.1%,背景变形率仅为9.4%;帧丢失率低至0.8%,在所有对比模型中表现最佳。

音视频协调性:面部与身体不同步率降至5.1%,口型不同步率降至29.8%,两项指标均超越了传统商用系统。

美团LongCat大模型团队表示,开源LongCat-Video-Avatar 1.5不仅仅是一次版本更新,更是向全球开发者和创作者社区发出的邀请。 他们希望该模型能成为一个可验证、可改进的技术基础,助力推动数字人视频应用在现实世界中的边界拓展。

开源链接:

Github:https://github.com/meituan-longcat/LongCat-Video

HuggingFace:https://huggingface.co/meituan-longcat/LongCat-Video-Avatar-1.5

技术报告:https://github.com/meituan-longcat/LongCat-Video/blob/main/assets/LongCat-Video-Avatar-1.5-Tech-Report.pdf

项目页面:https://meigen-ai.github.io/LongCat-Video-Avatar-1.5-Page/

Modelscope:https://www.modelscope.cn/models/meituan-longcat/LongCat-Video-Avatar-1.5/summary

相关文章
Preply的“独角兽”地位体现了乌克兰的韧性 Preply的“独角兽”地位体现了乌克兰的韧性 语言学习平台Preply在完成1.5亿美元D轮融资后,估值达到12亿美元,这标志着这家成立14年的公司迈出了重要一步。其现有投资者包括Horizon Capital、Hoxton Ventures、Owl Ventures和Techstars Berlin。自2013年开始为语言学习者与辅导老师搭建桥梁以来,Preply已连续12个月实现息税折旧及摊销前利润(EBITDA)盈利。与此同时,该公司加
王兴兴:具身人工智能有望在2至3年内实现类似ChatGPT的突破 王兴兴:具身人工智能有望在2至3年内实现类似ChatGPT的突破 BotSchool创始人兼首席执行官王兴兴在2026年世界机器人大会(WRC2026)主论坛上的演讲中强调,具身智能正接近一个类似于“ChatGPT时刻”的产业转折点。 他预测,相关突破最快可能在两到三年内实现,而在应用普及较慢的情景下,则可能需要五到十年时间。就在王兴兴发表演讲的前一天,BotSchool刚刚在上海证券交易所科创板上市,其股票在上市首日收盘价较发行价上涨了460%。 王强调,具身
微软推出新编码模型,重启内部AI战略,因Claude成本飙升 微软推出新编码模型,重启内部AI战略,因Claude成本飙升 AI辅助编码已成为现代软件开发中的常态,然而,即使是微软这样的科技巨头,也感受到了昂贵的第三方大型语言模型订阅带来的压力。为了减少对外部依赖和运营开销,微软正准备推出自己的AI模型套件,直接瞄准AI编码领域。飙升的成本推动微软转向内部解决方案微软最近要求内部团队从商业Claude模型迁移到其自己的GitHub Copilot,主要原因是租用和使用Claude的成本过高。此前,与OpenAI的独家协议限制了微软在某些高级领域开发竞争技术的能力。然而,最近对这一合作伙伴关系的调整恢复了微软的研究
相关专题推荐
视频创作 专为 Reels、Shorts、广告及社交电商打造的 CapCut AI 视频编辑工具现已上线
专为 Reels、Shorts、广告及社交电商打造的 CapCut AI 视频编辑工具现已上线

2026年最新最优秀的CapCut AI视频编辑工具,专为Reels、Shorts、广告及社交电商场景打造!这份精心整理的清单汇集了经实际测试验证、效果出色的顶级工具。您将看到免费版与付费版的对比信息,以及详细的排名数据,助您选出最合适的工具。XIX.AI还将提供专业见解,帮助您在内容创作中充分发挥AI的优势。立即探索,找到理想的工具,提升您的生产力!

14 个工具
xix.ai
学术研究 最佳 AI 研究发现工具:快速查找期刊、数据集和趋势
最佳 AI 研究发现工具:快速查找期刊、数据集和趋势

2026 年最新最佳顶级 AI 学习发现工具现已上线 XIX.AI!此精选列表包含强大的变革性资源,可快速访问期刊、数据集和行业趋势。获取免费与付费版的对比,以及每周更新的真实测试和排名。必试选项有助于提升您的研究效率,释放您的 AI 优势。立即探索,发现您的完美工具!

10 个工具
xix.ai
营销 用于生命周期营销的AI电子邮件营销工具
用于生命周期营销的AI电子邮件营销工具

2026年最新最佳、评分最高的生命周期营销AI邮件营销工具!XIX.AI精心精选了一系列功能强大、颠覆行业的必试解决方案,这些方案不仅能提升写作效率、帮助创建高度精准的内容,还能优化整个营销工作流程。 每周更新的排行榜、真实场景测试以及免费版与付费版的对比分析,助您找到最适合自身需求的工具。立即探索,释放您的AI优势!

11 个工具
xix.ai
金融 顶级人工智能投资研究工具:比较交易信号和投资组合风险
顶级人工智能投资研究工具:比较交易信号和投资组合风险

2026年最新高评分最佳AI投资研究工具已登陆XIX.AI!这份精心筛选的清单包含精准可靠的信号,可帮助您评估投资组合风险,并做出更明智、以数据为依据的决策。我们每周都会进行实际测试以更新排名,并提供免费版与付费版的对比分析。立即发现最适合您的工具,提升投资分析效率。 立即探索!

10 个工具
xix.ai
聊天机器人 用于网站客服的人工智能聊天机器人工具
用于网站客服的人工智能聊天机器人工具

2026年最新、最受欢迎、评分最高的网站客服AI聊天机器人工具,尽在XIX.AI!我们精心筛选的这份清单汇集了功能强大、具有颠覆性的解决方案,能够提升响应速度、提高客户满意度,并大幅节省人工工作量。每款工具都经过严格的实际测试,并附有免费版与付费版的详细对比信息。 立即探索,找到能有效提升您在线客服效率的完美工具!

10 个工具
xix.ai
社交媒体 适用于店铺、私信及社区管理的 Instagram AI 评论回复工具
适用于店铺、私信及社区管理的 Instagram AI 评论回复工具

2026年最新最棒的Instagram人工智能评论回复工具,专为店铺运营、私信沟通及社区管理设计!XIX.AI精心整理了一份评分极高的优质解决方案清单,其中包含每周更新的排名信息、免费版与付费版的对比数据以及实际应用测试结果。这些值得尝试的工具能够通过简化回复流程、节省时间,并提升各社交媒体平台上的客户互动度,显著提高工作效率。立即探索,找到最适合您实现无缝社区管理的理想工具!

10 个工具
xix.ai
评论 (0)
0/500
OR