Elman神經網絡

它的主要結構是前饋連接, 包括輸入層、 隱含層、 輸出層, 其連接權可以進行學習修正;反饋連接由一組“結構 ” 單元構成,用來記憶前一時刻的輸出值, 其連接權值是固定的。在這種網絡中, 除了普通的隱含層外, 還有一個特別的隱含層,稱為關聯層 (或聯繫單元層 ) ;該層從隱含層接收反饋信號, 每一個隱含層節點都有一個與之對應的關聯層節點連接。關聯層的作用是通過聯接記憶將上一個時刻的隱層狀態連同當前時刻的網絡輸入一起作為隱層的輸入, 相當於狀態反饋。隱層的傳遞函數仍為某種非線性函數, 一般為 Sigmoid函數, 輸出層為線性函數, 關聯層也為線性函數。