跳到主要內容
1.3 機器學習基本原理
114-4 科目 6

在 Lasso 模型中,L1 正則化(Regularization)導致參數收斂為零的原因為何?

請選擇一個答案

答案 C

核心概念

Lasso 就是加了 L1 懲罰項(權重絕對值總和)的迴歸。 想像你在整理出國的行李,航空公司規定總重量有上限。L1 的罰法是每公斤都罰一樣多,所以那些「帶了也用不到」的東西你會直接丟掉,箱子裡只留真正要用的。L2 的罰法是越重的東西罰越兇,你會把每樣東西都換成輕一點的版本,但幾乎不會整個丟掉。 絕對值函數在 0 這個點是尖角,對權重的壓縮力道不會隨權重變小而減弱。所以那些對預測沒什麼貢獻的特徵,權重會被一路推到剛好等於 0,最後只留下少數重要特徵:這就是「稀疏解(Sparse Solution)」,也是 Lasso 能兼做特徵選擇的原因。
答題技巧

快速判斷技巧:看到「Lasso/L1/收斂為零」就鎖定「稀疏(Sparse)」。 稀疏是 L1 的招牌詞,選項裡出現它就是答案。

易錯陷阱:(B) 用「平滑」這個聽起來很正面的詞混淆,但平滑是 L2 的標籤; (D) 則是用「非凸」這種進階術語製造氣勢。 遇到不熟的術語不要被嚇到,先確認最有把握的那個關鍵字(稀疏)有沒有出現。