一、線性回歸
線性回歸是一種通過(guò)找到優(yōu)異擬合線來(lái)描述變量間關(guān)系的算法。它主要用于預(yù)測(cè)連續(xù)性變量,如房?jī)r(jià)、銷(xiāo)售量等。
二、邏輯回歸
邏輯回歸雖名為回歸,但通常用于分類(lèi)任務(wù)。它通過(guò)Sigmoid函數(shù)來(lái)估計(jì)離散值,如是/否、成功/失敗等。
三、嶺回歸
嶺回歸是一種解決共線性問(wèn)題的線性回歸技術(shù),通過(guò)加入L2正則化項(xiàng)來(lái)減小模型復(fù)雜度。
四、套索回歸
套索回歸同樣用于解決共線性,但通過(guò)L1正則化來(lái)實(shí)現(xiàn)特征選擇,只保留重要特征。
五、彈性網(wǎng)絡(luò)
彈性網(wǎng)絡(luò)結(jié)合了L1和L2正則化,既實(shí)現(xiàn)特征選擇又減小模型復(fù)雜度。
六、多項(xiàng)式回歸
多項(xiàng)式回歸通過(guò)將特征轉(zhuǎn)換為多項(xiàng)式來(lái)擬合非線性關(guān)系,更靈活地表示數(shù)據(jù)關(guān)系。
七、支持向量回歸
支持向量回歸使用支持向量機(jī)原理來(lái)解決回歸問(wèn)題,尋找優(yōu)異擬合超平面。
八、決策樹(shù)回歸
決策樹(shù)回歸通過(guò)分割特征空間來(lái)擬合數(shù)據(jù),易于理解和解釋。
常見(jiàn)問(wèn)答:
1、線性回歸與邏輯回歸有何不同?
答:線性回歸用于預(yù)測(cè)連續(xù)變量,邏輯回歸用于分類(lèi)任務(wù)。
2、正則化在回歸中的作用是什么?
答:正則化用于減小模型復(fù)雜度,避免過(guò)擬合,如嶺回歸中的L2正則化。
3、支持向量回歸與支持向量機(jī)有何關(guān)聯(lián)?
答:支持向量回歸使用支持向量機(jī)的原理來(lái)解決回歸問(wèn)題,尋找優(yōu)異擬合超平面。