矩阵形式回归系数W推导

 前段时间看机器学习实战回归这个章节的内容,在矩阵形式的平方误差推导出回归系数W的的地方,作者直接给出了W 的表达式,当时并没有亲自推导。乍一看很好理解就过去了。后来看论文的过程中,又遇到了类似的推导,在打算自己推导的时候,发现并不容易,主要是并没有学习过矩阵求导的知识。后来在网上看到了矩阵求导的知识,贴在这里:

 x is a column vector, A is a matrix

d(Ax)/dx=A           

d(xTA)/dxT=A 

d(xTA)/dx=AT   

d(xTAx)/dx=xT(AT+A)

  通过这一部分知识的补充,自己推导出了W的表达式


版权声明:本文为sinat_33027857原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。