Методы оптимизации посвящены методам поиска наилучших решений т. е. минимумов (максимумов) функции на некоторых множествах. В зависимости от функций и множеств разбиваются на следующие разделы:

1. Одномерный поиск – изучает методы нахождения минимумов (максимумов) функции на заданном отрезке.

2. Нелинейное программирование делится на:

   Безусловная минимизация функций многих переменных на всем пространстве.

   Линейное программирование — изучаются задачи нахождения минимумов (максимумов) линейных функций на множествах определяемых системой уравнений и неравенств.

   Квадратичное программирование – задача нахождения минимумов (максимумов) квадратичных функций на квадратичном множестве.

   Условная минимизация (оптимизация) или нелинейное программирование в узком смысле – рассматриваются методы нахождения минимумов (максимумов) функций многих переменных на множествах определяемых системой уравнений и неравенств.

3. Выпуклое программирование – занимается изучением нахождения минимума выпуклой функции на выпуклом множестве.