Приветствую всех. Сегодня на занятии хотелось бы затронуть немало важную тему, связанную одновременно с дифференциальным исчислением и векторной алгеброй. Мы постараемся как можно меньше углубляться в теоретические тезисы и побольше сделаем упор на решение практических задач. Незамедлительно начнём. Определение слова "градиент" в математике нужно усвоить. Градиент - это вектор показывающий направление наибольшего возрастания функции. Модуль вектора градиента показывает скорость изменения функции...
Оптимизация – это процесс настройки Гиперпараметров (Hyperparameter) для минимизации Целевой функции (Cost Function). Иными словами, это набор методов совершенствования Модели (Model) Машинного обучения (ML). Чтобы справляться со своей основной задачей, модель использует такую функцию, обладающую множеством аргументов. Значение каждого из этих аргументов меняется в ходе оптимизации. Выражаясь простыми словами, на анимации ниже можно увидеть, как целевая функция под воздействием того или иного оптимизатора...