В бумагах на arxiv и некоторых видео, функция обновления весов выглядит как
И в других методах оптимизации индексы такие же. Почему так и как правильно это читать?
Индекс означает буквально "значение на шаге таком то". Т.е. формула описывает, каким образом вес на следующем шаге (t
) алгоритма обновления зависит от веса на предыдущем шаге t-1
и производную ошибки .