Linear regression

銀行發信用卡的例子

要不要發？

發多少額度？

理想的公式是輸出實數的公式

hypothesis長什么樣子？

加權求和算一個分數，x0是一個常數

perceptron 有 sign, 有sign取正負號的一步

linear hypothesis長什么樣子？二維空間是一條線 line

現在沒有ooxx了，只有o

三維空間長這樣 hypothesis就是一堆三維的平面 hyperplane

紅色的叫做誤差、余數、residual?

誤差怎么衡量？

in-sample 在我們的資料上，到底表現怎么樣

out-of-sample 在我們沒有看過的資料上，表現怎么樣

x,y 都從一個distribution出來

有noisy

怎么把Ein做的小？

怎么求一個w?

把這個式子表示成矩陣運算的形式

為了后面清楚一點

連加平方，表示成：向量長度的平方

共同的w提出來，整理一下

xi是高高的，轉置是橫躺的

最后得到

可微函數、凸函數、連續函數

在谷底的時候，各個方向的梯度都是0

Ein 中算向量平方的式子展開

這件事情沒有那么不直覺

A是一個對稱矩陣

?

沒有反矩陣存在，有很多解，如果平臺上有sudo-inverse, 直接用

?

轉載于:https://www.cnblogs.com/learning-c/p/5704302.html

總結

以上是生活随笔為你收集整理的线性回归[听课]的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。