Cómo encontrar el valor de una neurona en una red neuronal

Question

Dado que muchos de estos sitios que se encuentran en Google usan notación matemática y no tengo idea de lo que significa, quiero crear una red neuronal de alimentación como esta:

    n1  
i1      n3
    n2      o1
i2      n4
    n3  

Ahora, ¿alguien puede explicarme cómo encontrar el valor de o1? ¿Cómo es posible activar una neurona cuando ninguna de sus entradas está activa?

Answer 1

Si ninguna de las entradas está activa, no obtendrá nada de la salida.

Ha pasado mucho tiempo desde que pasé un tiempo en esto, pero en el pasado, agregaríamos ruido a la ecuación. Esto puede ser en forma de entradas que siempre están activadas o agregando una pequeña cantidad aleatoria a cada entrada antes de insertarla en la red neuronal.

Curiosamente, se ha demostrado que el uso del ruido en las redes neuronales tiene un análogo biológico. Si está tratando de escuchar algo y agrega un poco de ruido blanco, es más fácil escucharlo. Lo mismo vale para ver.

En cuanto a su pregunta inicial: cómo averiguar el valor de o1 depende de ...

• La fórmula utilizada en toda la red neuronal.
• Los valores de n1 a n4.
• Las entradas.

http://www.cheshireeng.com/Neuralyst/nnbg.htm

Tiene información básica sobre las matemáticas.

Answer 2

Dado que la pregunta no está realmente clara para mí ... Diré esto en caso de que sea lo que estás buscando:

Muchas veces se agrega una neurona sesgada a la entrada y las capas ocultas para permitir el caso que está mencionando. Esta neurona adicional siempre está activa y se usa para manejar el caso cuando todas las demás neuronas de la capa están inactivas.

Answer 3

Esta pregunta es un buen ejemplo de por qué " redes neuronales " hacer un trabajo tan increíblemente pobre de emular el comportamiento de las neuronas del mundo real. La mayoría de las neuronas reales tienen una velocidad intrínseca (o natural) a la que disparan potenciales de acción, sin entrada de neuronas presinápticas. El efecto de las neuronas presinápticas casi siempre es acelerar o ralentizar esta tasa de activación intrínseca, no producir un solo potencial de acción en la neurona post-sináptica.

¿Por qué no las redes neuronales? normalmente modela este fenómeno? No sé, tendrías que preguntar a las personas para quienes " el enfoque inspirado en la biología tiene más o menos abandonado por un enfoque más práctico basado en estadísticas y procesamiento de señales " ;.