低激活
引爆总参数巨大但单次只激活一小部分的稀疏混合专家模型
方向介绍
热门项目
13热门文章
226先把两个容易被标题带偏的事实摆正。
2026 年 10 月 26 日,腾讯混元开源了实时同声传译大模型 Hy-SimulMT:支持中英双向的语音到语音翻译,边听边译,同步输出译文文字与语音,并支持实时音色克隆。同一天起,社区围绕"3 秒延迟比专业译员还快""质量比肩人工同传"等宣传语展开讨论。本文不跟着宣传语走,而是直接翻仓库里的 config.json、model.safetensors.index.json 和 README,先核对"30B-A3B"这个数字到底从哪来,再看官方评测数据支撑到什么程度,最后梳理真实部署时绕不开的显存、多卡与音频链路三道门槛。
Recursive 的 Flint 是 2026 年 10 月最值得注意的本地编码模型之一:39.8B 总参数、每 token 约 2.5B 激活的 MoE,Apache-2.0 许可,主打「在 MacBook 和单卡工作站上跑出云端级 agentic coding 效果」。而真正决定它能不能落到开发者机器上的,不是模型卡上的 SWE-bench 分数,而是量化仓库 unsloth/flint-GGUF——它在四天里被拉走了近 7.9 万次,却只收到 207 个赞。
最近这半个月,AI 圈有点像过年。
10 月 23 日,MiniMax 把 M3.1-Flash 的完整模型权重开源到本仓库。但真正让开发者圈讨论起来的,不是权重本身,而是权重背后那份先跑出来的流量成绩单:官方口径,M3.1 Flash 上线后 72 小时内处理的 Token 超过 100 万亿(即「三天百万亿」)。这个数字出自上线初期的第三方报道,与 MiniMax 官方 10 月 19 日发布的模型信息可以互相印证——在亮明身份之前,它的早期版本还曾以匿名身份「Space Bunny」在 OpenCode 的公开调用榜上连霸 12 天日榜第一。
2026 年 10 月 17 日,DeepSeek 在几乎没有预热的情况下将 V4.1 Flash 更新至 V4.1-Flash-1017 版本,网页端、APP 与 API 模型同步切换。没有新发布会,甚至 API 调用方式与价格都保持不变——但社区却炸了。原因在于这次"静默更新"的内容量级并不小:性能全面上扬的同时任务耗时与输出长度双双收缩,官方还重点强化了一项被媒体称为"许愿式编程"的能力——在提示词和素材参考极其有限的条件下,从零生成可运行的项目成品。
2026 年 9 月 30 日,蚂蚁百灵团队正式发布 Ling-3.1-flash:约 560B 总参数、每 Token 仅激活 25B 参数的混合线性 MoE 架构,官方宣称上下文窗口上限达 1M Token,同时宣布"限时两周免费体验"。发布后不到 24 小时,该模型便冲上 ModelScope(魔搭社区)热门榜单第 2 位,社区随即涌现大量接入实测与部署教程。本文基于 ModelScope / Hugging Face 上架的官方权重仓库(即 hf_mirrors/inclusionAI/Ling-3.1-flash),逐层拆解这批参数的真正含义、源码中的架构证据,以及"限时免费"这一定价打法背后的商业逻辑。
2026 年 8 月,阿里通义千问团队以罕见的节奏完成了 Qwen3.8 全系开源:先是 8 月 3 日发布并承诺开放史上首个 Max 级超大杯权重,随后 8 月中旬放出自带视觉能力的稠密 27B,紧接着推出面向极致性价比的 Flash 梯队,其中 Qwen3.8-Flash-Next 直接以"未来 Qwen4 架构的先行预览"身份亮相。与这轮开源同时官宣的,是 Qwen 家族全球下载总量突破 30 亿次——这个数字背后,既有连续三代模型积累的生态基数,也有社区对"效率优先"路线的一次集体投票。本文结合社区一线情报与仓库源码,拆解这次全系开源的时间线、技术含量与行业信号。
十月中下旬,开源语音圈经历了一次罕见的连续发布:先是 Nemotron-3-Diarization 以“8 人同时说话、0.32 秒延迟、1 亿参数、消费级显卡可跑”的标签在中文技术社区刷屏,十来天后,NVIDIA 又在同一天把 Nemotron-3.5-Transcribe-30B-A4B 推上 Build、GitHub、Hugging Face 与 NGC 四个渠道。在社区舆论中,前者的热度明显高于后者,但从工程价值看,真正改变批量音频处理方式的却是后者。
导读(以下是正文,先给结论:腾讯混元 Hy-SimulMT 的媒体声量在发布后 48 小时内到达峰值,而开发者社区的"跑通率"被三个结构性因素压住——验证成本高、部署栈碎片化、权重仓库零可运行样例。本文基于模型仓库的 config、权重索引与 README 源码级细节,拆开这三条线。)