Coupling

ML Theory 太魔怔了！！！！！ 我们来考虑更快的下降算法。 对 \(L\)-smooth 的 Gradient Descent，我们有两种视角来看它。一种是局部视角，梯度方向相近的点的函数值一定会下降，另一种是全局视角，用一个二次函数为整个 \(f\) 提供了一个 lowerbound。当局 ......