RUS  ENG
Полная версия
ЖУРНАЛЫ // Журнал вычислительной математики и математической физики // Архив

Ж. вычисл. матем. и матем. физ., 2019, том 59, номер 7, страницы 1137–1150 (Mi zvmmf10921)

Эта публикация цитируется в 17 статьях

Быстрый градиентный спуск для задач выпуклой минимизации с оракулом, выдающим $(\delta,L)$-модель функции в запрошенной точке

А. В. Гасниковabc, А. И. Тюринa

a 101000 Москва, ул. Мясницкая, 20, НИУ ВШЭ, Россия
b 141700 Долгопрудный, М.о., Институтский пер., 9, НИУ МФТИ, Россия
c 127051 Москва, Бол. Каретный пер., 19, стр. 1, Ин-т пробл. передачи информац. РАН, Россия

Аннотация: Предлагается новая концепция $(\delta,L)$-модели функции, которая обобщает концепцию $(\delta,L)$-оракула Деволдера–Глинера–Нестерова. В рамках этой концепции строятся градиентный спуск, быстрый градиентный спуск и показывается, что многие известные ранее конструкции методов (композитные методы, методы уровней, метод условных градиентов, проксимальные методы) являются частными случаями предложенных в данной работе методов. Библ. 34.

Ключевые слова: градиентный спуск, быстрый градиентный спуск, модель функции, универсальный метод, метод условного градиента, композитная оптимизация.

УДК: 519.85

Поступила в редакцию: 08.11.2017
Исправленный вариант: 08.11.2017
Принята в печать: 11.03.2019

DOI: 10.1134/S0044466919070081


 Англоязычная версия: Computational Mathematics and Mathematical Physics, 2019, 59:7, 1085–1097

Реферативные базы данных:


© МИАН, 2024