作者:SYBRAND 編輯團隊 · 2026/9/1
SLM(Small Language Model,小型語言模型)泛指參數量遠低於旗艦級大型語言模型(LLM)的一類 AI 模型。業界對於規模的分界並沒有絕對統一的數字定義,SLM 的核心特徵在於:透過縮減模型規模、聚焦訓練資料範圍,換取更低的運算成本、更快的回應速度,以及能在較有限硬體資源上執行的能力,而非追求涵蓋所有領域的最廣泛知識與最強推理能力。
選擇小型語言模型並非「退而求其次」的妥協,而是一種任務對齊的工程判斷。當一項任務範圍明確、輸入輸出格式相對固定,例如將客服對話分類、擷取表單中的特定欄位,或判斷一段文字的情緒傾向,經過針對性訓練或微調的小型模型往往能達到接近甚至等同大型模型的準確率,卻能以遠低的延遲與成本完成任務。真正決定該用大模型還是小模型的關鍵,是任務所需的推理廣度,而非「模型愈大愈好」的直覺。
代理式 AI(Agentic AI)系統的運作方式,通常是將一項複雜任務拆解成一連串由不同 AI 代理(agent)負責的小型子任務,例如先由一個代理判斷使用者意圖、再由另一個代理擷取所需資料、最後由第三個代理整理成回覆格式。當一套系統內同時存在大量這類子任務、且執行頻率極高時,若每個環節都仰賴大型模型處理,整體的運算成本與回應延遲會迅速累積放大。這正是小型語言模型的價值所在:把大量重複、範圍明確的子任務交給成本更低、速度更快的小模型處理,只在真正需要廣泛推理、複雜判斷或創造性產出的關鍵環節,才呼叫大型模型介入。
務實的系統設計,並非用小型模型全面取代大型模型,而是建立一套「依任務分派」的混合式架構,可以將其理解為組織內的分工邏輯:例行、重複、規則明確的工作交由基層流程處理,唯有真正需要綜合判斷與經驗累積的疑難情況,才會上呈給資深人力。在 AI 系統中,小型語言模型扮演的正是前者的角色,而大型語言模型則保留給後者,兩者相輔相成而非互斥競爭。
對正在評估導入代理式 AI 系統的企業而言,與其一開始就追求「用最強的模型做所有事」,更務實的做法是先盤點內部流程中哪些環節屬於高頻率、低複雜度的重複性任務,評估是否適合以小型或經過微調的模型承接,藉此驗證整體架構的成本效益,再逐步擴大導入範圍。必須誠實提醒,小型語言模型與相關工具的技術發展仍在快速演進中,實際評估時應以當下可取得的模型效能測試結果為準,而非單憑規模大小做判斷。