举例.以一个梯度法作为例子，其中第四步中使用到了线搜索。在第四步的线搜索中算法可以通过解方程 formula_14 来"精确地"，或者只是通过寻找一个 formula_15 的充分下降来"粗略地"最小化 formula_15。前者的一个例子是共轭梯度法。后者被称作不精确线搜索，有很多种实现方法，比如或者是使用。与其它的最优化方法类似，线搜索也可以跟模拟退火结合以越过一些局部最小值。
算法.
直接搜索方法.这种方法里，必须先把最小值括在一个范围内，也