拟牛顿法 牛顿法在理论上有很好的效果，然而对于大规模问题，函数的海塞矩阵计算待解特别大或者难以得到，即便得到海塞矩阵我们还需要求解一个大规模线性方程组。那么能否使用海塞矩阵或其逆矩阵的近似来进行牛顿迭代呢？拟牛顿法便是这样的算法，它能够在每一步以较小的代价生成近似矩阵，并且使用近似矩阵代替海塞矩阵，而产生的迭代序列仍具有超线性收敛的性质。 拟牛顿法不计算海塞矩阵 ∇ 2 f ( x ) \nab