написал примитивную нейронную сеть без скрытых слоев. На вход дается два числа, но ответ зависит только от первого: если первый элемент равен 1, то и результатом должна быть единица, если 0, то 0. В итоге после обучения нейронная сеть далеко не всегда дает правильный результат. Вот мой код:
#include <iostream>
#include <time.h>
#include <math.h>
using namespace std;
// Summary value in neuron
float NeuronSum(float input[2], float weights[2],float bweight) {
float result = 0;
for (int i = 0; i<2; i++) {
result += input[i] * weights[i];
}
result += 1.0 * bweight;
return result;
}
float ActivateFunction(float x) {
return 1/(1+pow(2.72,-x));
}
float ActivateFunctionDerivative(float x) {
return ActivateFunction(x) * (1-ActivateFunction(x));
}
// ai result
float aiRes(float input[2], float weights[2],float bweight) {
return ActivateFunction( NeuronSum(input, weights, bweight) );
}
int main() {
/*-----------Neural network--------------------------------
-------------STRUCTURE:------------------------------------
* - input neuron, # - hidden neuron, @ - output neuron
-----------------------------------------------------------
*
* @
-----------------------------------------------------------
*/
srand(time(0));
float imput[4][2] = {{1,0}, {0,0}, {0,1}, {1,1}};
float output[4] = {1,0,0,1};
float weights[2];
float speed = 0.3;
float error;
float result;
float rawResult;
// bias weight
float bweight = (float)rand()/(float)(RAND_MAX) * 2 - 1;
for (int weight = 0; weight < 2; weight++) {
weights[weight] = (float)rand()/(float)(RAND_MAX) * 2 - 1;
}
for (int epoch = 1; epoch <= 2000; epoch++) {
for (int i = 0; i < 4; i++) {
rawResult = NeuronSum(imput[i], weights, bweight);
result = aiRes(imput[i], weights, bweight);
error = output[i] - result;
for (int mask = 0; mask < 2; mask++) {
weights[mask] = weights[mask] + error*ActivateFunctionDerivative(rawResult) * result * speed;
}
bweight = bweight + error * ActivateFunctionDerivative(rawResult) * result * speed;
}
}
float test[2] = {1,0};
cout << aiRes(test, weights, bweight) << endl;
if (aiRes(test, weights, bweight) > 0.5) {
cout << "I think answer is 1!";
} else {
cout << "I think answer is 0!";
}
}