Сегодня начал изучать нейронные сети и придумал себе следующую задачу:
Есть группа в ВК, у нее есть статистика, которую можно выгрузить в виде .xls файла. Файл имеет следующий вид: Всего 844 строки, но меня интересует только половина с параметром views (получается 422 строки) Я хочу по этой статистике предсказать количество просмотров группы в определённый день (в таблице обозначен как time)
По одному из туториалов я набросал следующий код:
from keras.models import Sequential
from keras.layers import Dense, LeakyReLU, BatchNormalization, Activation
from keras.callbacks import ReduceLROnPlateau
from keras.optimizers import Nadam
import pandas as pd
import numpy as np
# Подготовка датасетов
db = pd.read_excel('db.xls')
x = db.get('time').values[::-2] # 422 всего
y = db.get('val').values[::-2]
model = Sequential()
model.add(Dense(64, input_dim=1))
model.add(BatchNormalization())
model.add(Dense(64))
model.add(LeakyReLU())
model.add(Activation('linear'))
model.add(Dense(1))
model.add(Activation('linear'))
opt = Nadam(lr=0.001)
reduce_lr = ReduceLROnPlateau(monitor='val_loss', factor=0.9, patience=5, min_lr=0.000001, verbose=1)
model.compile(optimizer=opt, metrics=['accuracy'], loss='mse')
history = model.fit(x[:300], y[:300], epochs=10000, batch_size=300, verbose=1, validation_data=(x[300:], y[300:]),
callbacks=[reduce_lr], shuffle=True)
print(model.predict(np.array([43248])))
Но при обучении сети у нее низкая точность, вот вывод последних строк при обучении:
300/300 [==============================] - 0s 10us/step - loss: 232.2393 - acc: 0.0333 - val_loss: 124.9310 - val_acc: 0.0492
Epoch 10000/10000
300/300 [==============================] - 0s 10us/step - loss: 232.2376 - acc: 0.0333 - val_loss: 124.9555 - val_acc: 0.0492
[[38.514076]]
Это меньше 3х процентов (если я правильно понимаю единицы измерения).
Что я пробовал: 1. Добавить еще один слой (64 нейрона, уже есть в коде) 2. Менять параметры для количества эпох
Изменения приводили к улучшениям, но они были несерьезными, не выше 0.04
Вопрос: как мне улучшить показатели? Какие ошибки я мог допустить при проектировании сети?