Обобщенная аппроксимационная теорема и вычислительные возможности нейронных сетей

Исследуются вычислительные возможности искусственных нейронных сетей. В связи с этим наметились возврат к классической постановке вопроса о представлении функций многих переменных с помощью суперпозиций и сумм функций одного переменного и новая редакция этого вопроса (ограничение одной произвольно выбранной нелинейной функцией одного переменного).
Показано, что можно получить сколь угодно точное приближение любой непрерывной функции многих переменных, используя операции сложения и умножения на число, суперпозицию функций, линейные функции, а также одну произвольную непрерывную нелинейную функцию одного переменного. Для многочленов получен алгебраический вариант теоремы.
Для нейронных сетей полученные результаты означают, что от функции активации нейрона требуется только нелинейность.