开源视觉大型模型提升多模态生成能力,2K高清音视频有望彻底改变行业格局

8月3日,人工智能公司MiniMax宣布将其新一代通用视频模型MiniMax H3 开源。这一全模态生成系统突破了传统单任务的界限,深度整合并理解文本、图像、视频和音频等多模态上下文,展现出强大的任务泛化能力。
在生成方面,H3支持以24帧/秒的帧率和32千赫的立体声音频,输出时长为4至15秒。 用户可选择21:9、16:9、4:3或1:1等常见宽高比,基本创作时默认较短边为768像素。专用的H3-Regenerate-2K解决方案可生成高达2K分辨率的精美图像。 在多语言交互方面,它可靠地支持11种主要语言:阿拉伯语、中文、英语、法语、德语、意大利语、日语、韩语、西班牙语、葡萄牙语和俄语。
为适应多样化的创作场景,H3 提供了灵活的模型版本和丰富的输入选项。H3-Base-FL2VA 首尾帧模式支持 0 至 2 张图片,可处理文本转视频、首帧转视频、尾帧转视频以及首尾帧协作等任务。 与此同时,H3-Base-Ref2VA 全模态参考模式支持最多 9 张图片、3 个视频片段(总时长不超过 15 秒)和 3 个音频片段的混合输入——总计最多 12 个文件——为专业创作者提供了前所未有的精细控制能力。
在技术层面,MiniMax H3 系统由三个核心模块组成。首先,H3-Context-IR(上下文中间表示)模块对复杂的多指令进行深度分析,并将其转换为模型易于处理的结构,这是实现高质量输出的关键环节。 其次,H3-Base 模块生成 768p 分辨率的基础音频和视频。最后,H3-Regenerate-2K 模块通过将初始结果与原始上下文进行反馈,实现 2K 超分辨率重建。这种组合在保留生动细节的同时,大幅提升了视觉保真度。
该模型现已根据 MiniMax H3 社区许可证正式发布。开发者和技术爱好者可通过Hugging Face 获取完整的开源代码和资源。行业专家认为,此次开源发布将进一步降低多模态视频生成的门槛,推动影视制作、视觉设计和 AI 交互迈向新高度。
相关文章
Cloudera 与 Mistral 合作,提供企业级数据解决方案和主权人工智能
Cloudera 与 Mistral 正在将 Cloudera 的混合数据和 AI 平台与 Mistral 的主权 AI 模型进行整合。图片来源:ClouderaCloudera 与 Mistral AI 已建立合作伙伴关系,旨在将可定制的主权 AI 直接应用于企业数据,确保在混合环境中实现安全的 AI 部署。总部位于美国的数据与人工智能公司 Cloudera 与欧洲人工智能实验室 Mistral
安森美将以70亿美元股票收购Synaptics,从而巩固其在边缘AI芯片市场的地位
2月25日,领先的半导体制造商安森美(onsemi)宣布,计划通过全股票交易收购边缘AI芯片专家Synaptics,交易估值约为70亿美元(约合476.6亿元人民币)。该交易预计将于2027年年中完成。两家公司的产品线高度互补,预计将产生总计2亿美元的协同效应。根据协议,Synaptics现有股东将获得onsemi约12%的完全稀释后股份。 此外,Synaptics的一名董事会成员将加入onsem
机器人独角兽宇树科技冲刺科创板;签约获5.2万元,预计发行价超100元
8月5日,中国领先的人形机器人公司高仙科技(Autonavi Technology)在科创板(STAR Market)启动初步询价,时间为9:30至15:00。保荐机构兼主承销商同步开展线下投资者路演,战略配售对象缴付认购资金。最终定价、合格投标人及分配股份数量将于8月6日确认,网上网下申购于8月10日启动,缴款截止日为8月12日。关于资本发行,高仙科技计划发行4044.64万股新股,占IPO后总股本(4.04亿股)的10%,旨在筹集42.02亿元。市场共识预计IPO估值将超过400亿元。基于
相关专题推荐
评论 (0)
0/500

8月3日,人工智能公司MiniMax宣布将其新一代通用视频模型
在生成方面,H3支持以24帧/秒的帧率和32千赫的立体声音频,输出时长为4至15秒。 用户可选择21:9、16:9、4:3或1:1等常见宽高比,基本创作时默认较短边为768像素。专用的H3-Regenerate-2K解决方案可生成高达2K分辨率的精美图像。 在多语言交互方面,它可靠地支持11种主要语言:阿拉伯语、中文、英语、法语、德语、意大利语、日语、韩语、西班牙语、葡萄牙语和俄语。
为适应多样化的创作场景,H3 提供了灵活的模型版本和丰富的输入选项。H3-Base-FL2VA 首尾帧模式支持 0 至 2 张图片,可处理文本转视频、首帧转视频、尾帧转视频以及首尾帧协作等任务。 与此同时,H3-Base-Ref2VA 全模态参考模式支持最多 9 张图片、3 个视频片段(总时长不超过 15 秒)和 3 个音频片段的混合输入——总计最多 12 个文件——为专业创作者提供了前所未有的精细控制能力。
在技术层面,MiniMax H3 系统由三个核心模块组成。首先,H3-Context-IR(上下文中间表示)模块对复杂的多指令进行深度分析,并将其转换为模型易于处理的结构,这是实现高质量输出的关键环节。 其次,H3-Base 模块生成 768p 分辨率的基础音频和视频。最后,H3-Regenerate-2K 模块通过将初始结果与原始上下文进行反馈,实现 2K 超分辨率重建。这种组合在保留生动细节的同时,大幅提升了视觉保真度。
该模型现已根据 MiniMax H3 社区许可证正式发布。开发者和技术爱好者可通过
Cloudera 与 Mistral 合作,提供企业级数据解决方案和主权人工智能
Cloudera 与 Mistral 正在将 Cloudera 的混合数据和 AI 平台与 Mistral 的主权 AI 模型进行整合。图片来源:ClouderaCloudera 与 Mistral AI 已建立合作伙伴关系,旨在将可定制的主权 AI 直接应用于企业数据,确保在混合环境中实现安全的 AI 部署。总部位于美国的数据与人工智能公司 Cloudera 与欧洲人工智能实验室 Mistral
安森美将以70亿美元股票收购Synaptics,从而巩固其在边缘AI芯片市场的地位
2月25日,领先的半导体制造商安森美(onsemi)宣布,计划通过全股票交易收购边缘AI芯片专家Synaptics,交易估值约为70亿美元(约合476.6亿元人民币)。该交易预计将于2027年年中完成。两家公司的产品线高度互补,预计将产生总计2亿美元的协同效应。根据协议,Synaptics现有股东将获得onsemi约12%的完全稀释后股份。 此外,Synaptics的一名董事会成员将加入onsem
机器人独角兽宇树科技冲刺科创板;签约获5.2万元,预计发行价超100元
8月5日,中国领先的人形机器人公司高仙科技(Autonavi Technology)在科创板(STAR Market)启动初步询价,时间为9:30至15:00。保荐机构兼主承销商同步开展线下投资者路演,战略配售对象缴付认购资金。最终定价、合格投标人及分配股份数量将于8月6日确认,网上网下申购于8月10日启动,缴款截止日为8月12日。关于资本发行,高仙科技计划发行4044.64万股新股,占IPO后总股本(4.04亿股)的10%,旨在筹集42.02亿元。市场共识预计IPO估值将超过400亿元。基于





首页






