欢迎访问Blog总目录!
目录
一、标量函数对向量求导
假设是标量函数,自变量为
,
是
维度的列向量。
对
求导:
- 分母布局(常用):导数的行数与自变量相同,维度与自变量一致
注:后续未标明处均为分母布局。
- 分子布局:导师的行数与分子相同
二、向量函数对向量求导
假设是向量函数,
是
维度的列向量,自变量为
,
是
维度的列向量。
对
求导:
- 分母布局:
- 分子布局
举例:
链式法则:
假设是标量函数,
是向量函数,
是
维度的列向量,自变量为
,
是
维度的列向量。
对
求导:
注意与常规链式法则的顺序不同!
三、实值标量函数对矩阵求导
假设是实值标量函数,自变量为
,
是
维度的矩阵。
对
求导:
乘积法则:
商法则:
举例:
四、矩阵函数对矩阵求导
假设是矩阵函数,
是
维度的矩阵,自变量为
,
是
维度的矩阵。
对
求导: