Когда остановится?

Останавливаемся, когда либо , либо , где - наперед заданные малые положительные числа.

Но если функция имеет достаточно простой вид, то необходимым и достаточным условием оптимальности решения является равенство нулю градиента в т. (это действительно и для сложной функции, однако уравнение, где градиент =0 не решаемое).