5.3 Boosting【斯坦福21秋季:實(shí)用機(jī)器學(xué)習(xí)中文版】

簡(jiǎn)單推導(dǎo)了一下GB中負(fù)梯度和殘差等價(jià)的原因,視頻里講錯(cuò)了,不是說(shuō)殘差等于負(fù)梯度,而是說(shuō)降低殘差這個(gè)目標(biāo)可以轉(zhuǎn)化為擬合負(fù)梯度,也就是如果你每一步里擬合了負(fù)梯度,那你就一定能在這一步里降低一點(diǎn)點(diǎn)殘差。
筆記不支持latex,只能截圖了:

標(biāo)簽: