Оценка градиента критерия оптимизации при отсутствии его аналитического описания

Для получения оценки , где имеет конечную размерность , используют понятие конечных разностей и для простейшего случая первых разностей записывают градиент таким образом:

Величина зависит от конкретного выражения для вектора и выбирается после оценки чувствительности критерия к изменению компонент вектора .