На мой взгляд самое простое с чего нужно начинать изучать нейросети — это аппроксимация таких простых математических функций, как синус, квадратичная функция, экспонента и т.д. Согласно универсальной теореме аппроксимации — нейронная сеть с одним скрытым слоем может аппроксимировать любую непрерывную функцию многих переменных с любой точностью. Главное чтобы в этой сети было достаточное количество нейронов. И еще важно удачно подобрать начальные значения весов нейронов. Чем удачнее будут подобраны веса, тем быстрее нейронная сеть будет сходиться к исходной функции...

Approximatio - аппроксимация Слово "аппроксимация" происходит от латинского глагола approximare, что означает "приближаться", "приближать". На самом деле аппроксимация - это метод приближения, который используется для решения задач, когда точное решение невозможно или слишком сложно, позволяя исследовать числовые характеристики и качественные свойства объекта.       В математике: Построение кривых или функций, которые приблизительно соответствуют заданному набору точек или другой функции...