导数偏导数的数学定义 参考资料1和2中对导数偏导数的定义都非常明确.导数和偏导数都是函数对自变量而言.从数学定义上讲,求导或者求偏导只有函数对自变量,其余任何情况都是错的.但是很多机器学习的资料和开源库都涉及到标量对向量求导.比如下面这个pytorch的例子. import torch x = torch.tensor([1.0, 2.0, 3.0], requires_grad=True) y = x ** 2 + 2 z = torch.sum(y) z.backward() print(x…