Перцептрон (perceptron) — простейший блок нейронной сети. Но ведь можно представить и такую нейросеть — из одного блока.
Перцептрон это простая модель биологического нейрона: есть вход и выход, от входа x к выходу y идет сигнал. Сигнал этот перцептроном преобразуется посредством трех рычагов управления:
- вес w
- смещение b
- функция активации f (нелинейная)
Сигнал преобразуется так, что y = f(wx + b). Нелинейность функции активации — ее крайне важная черта. Именно она позволяет уловить сложные взаимосвязи данных.