Mage – 微软开源的 4B 参数多模态模型家族AI工具2小时前更新AI小集02Mage是什么Mage 是微软开源的 4B 参数多模态模型家族,包含流式视频/图像理解模型 Mage-VL 与图像生成与编辑模型 Mage-Flow。Mage-VL 通过 Codec-Native 编码将视觉 Token 减少 75%,推理提速 3.5 倍,支持实时视频理解;Mage-Flow 支持原生分辨率生成与指令编辑,Turbo 版 4 步采样、A100 单卡 0.6 秒出图。Mage的主要功能图像生成:支持 512–2048 任意原生分辨率的文生图,Turbo 版 4 步采样、A100 单卡 0.6 秒出图。图像编辑:支持背景替换、风格迁移、材质替换、元素增删等指令式编辑,可掩码局部修改。多模态理解:覆盖图像、文档、视频的问答与描述,支持直播/监控等实时流式视频理解。Mage的技术原理Mage-VL 的 Codec-Native 编码:参考 H.264/HEVC 视频编码思路,Mage-ViT 区分 I 关键帧(完整保留)与 P 预测帧(仅保留变化区域),视觉 Token 减少 75% 以上;配合仿生双系统架构(System 1 轻量事件网关监控变化、System 2 因果解码器完成推理),视频推理提速最高 3.5 倍,同时不丢失时空上下文。Mage-Flow 的原生分辨率生成:基于 Mage-VAE(重建质量对标 FLUX.2 且开销更低)与 NR-MMDiT(原生分辨率扩散 Transformer,无需尺寸桶训练),采用 Rectified Flow 匹配训练;提供 Base、RL 对齐、Turbo 蒸馏加速(4 步采样)及 Edit 编辑分支,在 4B 参数下实现高质量图像生成与指令编辑。微信关注回复“开源”,加入AI开源项目交流群如何使用Mage克隆仓库:从 GitHub 克隆microsoft/Mage代码仓库到本地环境。安装依赖:按照项目 README 安装所需的 Python 依赖与运行环境。下载权重:从 Hugging Face 下载 Mage-VL(理解)或 Mage-Flow(生成/编辑)的预训练权重。加载模型:根据任务类型加载对应模型,配置推理参数(如分辨率、采样步数)。执行任务:输入文本提示词、图像或视频流,执行生成、编辑或多模态理解任务。保存结果:获取并保存模型输出的图像、视频描述或问答结果。Mage的核心优势小参数大能力:仅 4B 参数量即同时覆盖高质量图像生成/编辑与流式视频理解,不依赖盲目堆参。Codec-Native 极致压缩:视觉 Token 减少 75%,视频推理提速最高 3.5 倍,原生支持实时直播与监控场景。原生分辨率生成:支持 512–2048 任意分辨率直出,无需尺寸桶训练,画面细节与文字渲染对标更大模型。极速采样:Turbo 版仅需 4 步,A100 单卡生成 1024×1024 图像不到 0.6 秒。全栈开源友好:代码、权重、论文全部开源,宽松协议,适合科研微调与中小算力落地。低硬件门槛:4B 规模大幅降低部署成本,为边缘设备多模态化提供可行方案。Mage的项目地址项目官网:https://microsoft.github.io/Mage/GitHub仓库:https://github.com/microsoft/MageHuggingFace模型库:https://huggingface.co/collections/microsoft/mageMage的同类竞品对比维度Mage(4B)Qwen3-VL-4B能力范围同时覆盖图像生成、编辑、流式视频与图文理解聚焦图像/视频/文档理解,不支持图像生成视频处理原生流式理解,Token 压缩 75%,推理提速 3.5 倍支持常规视频帧采样理解,流式实时性较弱图像生成Mage-Flow 支持文生图、指令编辑与任意分辨率生成无图像生成能力部署成本4B 统一架构,单卡 A100 可跑通生成+理解全流程4B 理解模型,需额外搭配其他生成模型才能覆盖 Mage 全链路Mage的应用场景实时直播/赛事解说:流式视频理解能力可实时分析直播画面并自动生成解说词与数据问答。智能监控安防:对监控视频进行实时异常事件检测与告警,大幅降低人工巡检成本。电商商品图生成:快速生成高质量商品主图、场景图及多风格变体,支持指令式局部修改。社交媒体内容创作:一键完成海报生成、风格迁移、元素增删等操作,降低设计门槛。边缘设备多模态助手:4B 小参数适合部署在手机、IoT 等端侧设备,提供本地化的图文视频理解服务。# AI工具# AI项目和框架©版权声明本站文章版权归AI工具集所有,未经允许禁止任何形式的转载。上一篇ToolJet - 开源 AI 低代码开发平台,可视化拖拽搭建下一篇ManClaw - 阿里旗下书旗团队推出的 AI 漫剧创作 Agent相关文章Riverflow 2.0 – Sourceful推出的图像生成与编辑模型AI小集3商汤小浣熊 – 商汤科技推出的“小浣熊”系列AI智能助手AI小集7TopView – 在线AI视频剪辑工具,一站式制作高质量营销视频AI小集3Leanstral 1.5 – Mistral AI 开源的形式化验证大模型AI小集3Flowra – 魔搭联合呜哩WULI团队开源的AI工作流开发工具AI小集2ACI.dev – 为AI智能体设计的开源MCP基础设施平台AI小集3暂无评论再想想发表评论暂无评论…热门工具Loomy即梦AISekoAiPPT秘塔AI搜索妙呀堆友Agent美图设计室绘蛙AIupdream办公小浣熊秒哒最新收录TipKayFloatboatPreviewOnSoloEpixa知漫剧最新文章秒悟Meoo – 1分钟生成前后端完整的网站,真0门槛开发!16分钟前ManClaw – 阿里旗下书旗团队推出的 AI 漫剧创作 Agent18分钟前ToolJet – 开源 AI 低代码开发平台,可视化拖拽搭建3小时前Nature Skills – 开源的 AI 科研技能库,聚焦论文全流程3小时前Academic Research Skills – 开源的 A I Agent 学术科研技能4小时前Lovart中文版 – Lovart 推出的新一代 AI 设计 Agent6小时前MemoraX Code – 专为 Coding Agent 设计的长期记忆系统6小时前VM0 – 企业 AI Agent 平台,自然语言构建工作流23小时前WeLM – 微信推出的自研大语言模型23小时前Mureka V9.5 – 昆仑万维推出的新一代 AI 音乐生成模型1天前Luna-TTS – 宇生月伴推出的文本转语音大模型1天前MyContext – 阿里千问办公开源的 Agent 上下文基础设施1天前用 AI 做歌一直火不起来?问题不在灵感,在你没有制作人思维1天前Origin – Cursor 推出的 AI 原生代码托管平台1天前if Studio – 阿里 iconfont 推出的企业级 AI 智能体工作台1天前