ニューロンをモデル化する際にどの性質に着目するかによりモデル化する方法は異なってくる。ニューロンの持つ細かな機能をモデル化すると複雑化してしまうので、ここではネットワークを構成する一要素としてニューロンの機能を単純化したモデルを考える。 ニューロンのモデルとして有名なものに、マカロックとピッツのモデルがある。マカロックとピッツが提案したものを図2.2に示す。
この図でニューロンの番目の入力をとすると、入力がこのニューロンに及ぼす影響はで表すことができる。このは結合荷重と呼ばれており、シナプス結合の強さを表す。はニューロンに対する閾値であり、入力の線形和が閾値を越えるとニューロンは興奮する。その出力をとして、このニューロンモデルに式で表すと以下のようになる。
式(2.1)で、は他の各ニューロンによる影響の総和から閾値を引いたもので内部ポテンシャルと呼ばれる。
ここでならば興奮性シナプス、ならば抑制性シナプスを表しており、であれば結合していない。式(2.2)は出力関数であり、以下のように与えられている。
この関数は図2.3のような階段関数となる。