В общем, спустя 4 года, я получил некоторые знания, которые мне помогли понять что такое нейронная сеть (далее НС) и как с ними работать. Ответ не претендует на супер-профессиональную литературу и написан новичком для новичков. Надеюсь кому-то он будет полезным.
Коротко, НС - это набор функций, которые трансформируют данные с одного формата в другой.
Слои НС
НС состоит обычно из нескольких слоев: входной (input), скрытый (hidden) и выходной (output). Всегда есть входной слой данных (иначе как без них?) и что-то, что мы получаем на выходе. Суть НС в том, чтобы подобрать количество слоев таким образом, чтобы НС не переобучалась, но и выдавала какой-то адекватный результат.
Переобучение - грубо говоря, когда предсказания НС будут очень плохими для данных, которые не похожи на тренировочные.
Нейроны
В свою очередь каждый слой состоит из какого-то количества нейронов. Звучит круто, но на деле это просто число, к которому применяется функция активации. А функция активации - функция, которая получает какое-то число из любого промежутка и трансформирует его в какое-то другое в более ограниченном промежутке.
Кстати, входные данные принято нормализировать, чтобы НС обучалась правильно.
Примеры функций активации:
- ReLU (используют чаще всего)
- Sigmoid
- Линейная
- и другие
Каждая такая функция более выгодна в определенных случаях. Более подробно о популярных.

Каждый нейрон соеденен между собой прямой линией (как на картинках), которая по факту ничего не значит. На самом деле связь нейронов состоит в том, что каждый cледующий нейрон это сумма каких-то предыдущих значений нейронов умноженных на коефициент - который по факту называют весами.
Зачем нужны веса? Если коротко, то они указывают на “полезность” входного значения.
На самом деле, НС не является самым лучшим вариантом, чтобы предсказать какие-то данные. В первую очередь использовать ли ее или какой-то другой алгоритм зависит от типа задачи. Если это классификация, то да. Если в предсказании Вы ожидаете какой-то промежуток значений, то это регрессия и НС тут уже не особо сможет помочь.
Как написать НС?
Если вы только хотите внедриться в сферу Data Science, то используйте tensorflow. Я когда-то пытался писать НС с нуля, так и забил, потому что оно стало слишком сложно держать всю математику в голове. А с такими библиотеками как tensroflow буквально пару строк и НС готова.
По сути Вам ничего не мешает написать НС в экселе. Просто надо терпение :)
Полезные каналы
P.S. Не хотел писать слишком много конкретной информации, чтобы не делать ответ еще длиннее, поэтому уложился общими терминами и понятиями.
Если у Вас есть предложения о дополнении ответа - смело предлагайте правку.
P.S. Хранить обученную НС можно как угодно. Зависимо от того, как Вы потом будете считывать обратно записанные данные. Но в целом достаточно хранить только веса и общую конфигурацию сети (кол-во слоев, нейронов).
P.S. На счет обучения в универе, то сначала идет обучение фундаментальных алгоритмов, линейных, логистических регрессий, SVM, Random Forest, KNN и тд. И под конец учёбы на 6-7 семестре будет что-то более приближенное к НС. Довольно интересно, но не всегда легко.
UPD 3
?