RUS  ENG
Полная версия
ЖУРНАЛЫ // Информатика и её применения // Архив

Информ. и её примен., 2020, том 14, выпуск 4, страницы 55–62 (Mi ia697)

Эта публикация цитируется в 1 статье

Оптимизация структуры сетей глубокого обучения

М. С. Потанинa, К. О. Вайсерa, В. А. Жолобовa, В. В. Стрижовba

a Московский физико-технический институт
b Вычислительный центр имени А. А. Дородницына Федерального исследовательского центра «Информатика и управление» Российской академии наук

Аннотация: Исследуется проблема выбора оптимальной структуры модели. Моделью служит суперпозиция обобщенных линейных моделей, элементами которой являются линейная регрессия, логистическая регрессия, метод главных компонент, автоэнкодер и нейросеть. Под структурой модели понимаются значения структурных параметров модели, задающих вид итоговой суперпозиции. Исследуется свойства алгоритма выбора структуры модели. Исследуется зависимость точности, сложности и устойчивости модели от способа задания структуры. Создан алгоритм выбора оптимальной структуры нейронной сети. Проведен вычислительный эксперимент с использованием реальных и синтетических данных. В результате эксперимента существенно снижена структурная сложность моделей с сохранением точности аппроксимации.

Ключевые слова: выбор моделей, линейные модели, автокодировщик, нейронные сети, структура, генетический алгоритм.

Поступила в редакцию: 02.12.2019

DOI: 10.14357/19922264200408



© МИАН, 2024