IXThinker·2026-07-19 23:20

研究揭示MoE專家路由系統性風險

混合專家模型成為高效推理主流路線：把大模型拆成眾多專家，每個單元只激活少數，兼顧大參數與低算力。但新研究揭示，其專家路由暗藏系統級風險——重複輸入即可誘導路由失衡，令服務延遲飆升，且黑盒即可施壓。

稀疏激活的甜蜜答案

混合專家架構把大模型拆成大量專家，每個單元只激活其中一小部分，總參數可以很大而單次計算量不會爆炸，對服務商而言幾乎是更大模型、更低成本、更高吞吐的工程答案。