RUS  ENG
Полная версия
ЖУРНАЛЫ // Доклады Российской академии наук. Математика, информатика, процессы управления // Архив

Докл. РАН. Матем., информ., проц. упр., 2022, том 507, страницы 22–25 (Mi danma312)

Эта публикация цитируется в 2 статьях

МАТЕМАТИКА

О неподвижных точках непрерывных преобразований, связанных с построением искусственных нейронных сетей

В. Б. Бетелинa, В. А. Галкинb

a Федеральное государственное учреждение "Федеральный научный центр Научно-исследовательский институт системных исследований Российской академии наук", Москва, Россия
b Сургутский филиал Федерального государственного учреждения "Федеральный научный центр Научно-исследовательский институт системных исследований Российской академии наук", Сургут, Россия

Аннотация: Предложен общий топологический подход для конструирования сходящихся искусственных нейронных сетей (ИНС) на основе настройки алгоритмов принятия решений на последовательности итераций непрерывных отображений (слоев ИНС). Отображения выбираются на основе оптимизационных принципов, составляющих основу “обучения ИНС”, а принятие решений по результатам обучения многослойной ИНС соответствует отысканию сходящейся последовательности к неподвижной точке. Выявлена существенная для этого класса задач вычислительная неустойчивость, связанная с явлением динамического хаоса и некорректностью этого класса задач. Предложены методы стабилизации, сходящиеся к устойчивым неподвижным точкам отображений, что является отправной точкой для широкого класса математических исследований по оптимизации обучающих наборов при построении ИНС.

Ключевые слова: искусственные нейронные сети, методы оптимизации, вычислительная неустойчивость, динамический хаос, методы регуляризации, неподвижные точки преобразований.

УДК: 519.6

Поступило: 18.07.2022
После доработки: 25.07.2022
Принято к публикации: 22.09.2022

DOI: 10.31857/S2686954322700035


 Англоязычная версия: Doklady Mathematics, 2022, 106:3, 423–425

Реферативные базы данных:


© МИАН, 2024