RNN: sırayı hafızada tutmak, ve hafızanın ufku

Aynı ağırlıklar her adımda tekrar uygulanıyor ve bir durum ileri taşınıyor. Hafıza gerçek; ufku da ölçülebilir.

Kaynaklar

• Elman, J. L. 1990 · Finding Structure in Time · Cognitive Science 14(2)
• Bengio, Y., Simard, P. & Frasconi, P. 1994 · Learning Long-Term Dependencies with Gradient Descent is Difficult · IEEE Trans. Neural Networks 5(2)
• Goodfellow, I., Bengio, Y. & Courville, A. 2016 · Deep Learning, Bölüm 10 · MIT Press