IXThinker·2026-01-04 11:00

DeepSeek升級殘差連接 十年基礎組件大改

殘差連接是深度學習最重要的基礎組件之一，自2016年何愷明在ResNet中提出以來，十年間未有本質改動。DeepSeek在新年首日上傳論文，由梁文鋒署名，對這一經典設計展開十年來首次重大升級。

經典設計十年未變

殘差連接的核心機制簡潔優雅：下一層輸出等於當前層輸入加上殘差函數的輸出。其成功關鍵在於「恆等映射」屬性，讓信號可以從淺層直接傳遞到深層，從而支撐起超深網絡的訓練。