Mashinali o’qitishga kirish fanidan mustaqil ish mavzu: Rekkurent neyron tarmoqlari Bajardi: 022-19 guruh: Xurramov Jasurbek Tekshirdi: Jurayev. U

Tegishli maydonlar va modellar
RNN'lar xaotik tarzda harakat qilishi mumkin . Bunday hollarda dinamik tizimlar nazariyasi tahlil qilish uchun ishlatilishi mumkin.

Ular aslida ma'lum bir tuzilishga ega bo'lgan rekursiv neyron tarmoqlardir : chiziqli zanjir. Rekursiv neyron tarmoqlar har qanday ierarxik tuzilmada ishlayotgan bo'lsa, bolalar tasvirlarini ota-ona tasvirlariga birlashtirsa, takroriy neyron tarmoqlar oldingi vaqt qadamini va yashirin tasvirni joriy vaqt bosqichi uchun tasvirni birlashtirib, vaqtning chiziqli progressiyasida ishlaydi.

Xususan, RNNlar cheklangan impulsli javob va cheksiz impuls javob filtrlarining chiziqli bo'lmagan versiyalari, shuningdek, chiziqli bo'lmagan avtoregressiv ekzogen model (NARX) sifatida paydo bo'lishi mumkin.

Kutubxonalar

Apache Singa
Kafe : Berkeley Vision and Learning Center (BVLC) tomonidan yaratilgan. U ham CPU, ham GPU-ni qo'llab-quvvatlaydi. C++ da ishlab chiqilgan va Python va MATLAB paketlariga ega.
Chainer : To'liq Python-da, protsessor, GPU uchun ishlab chiqarishni qo'llab-quvvatlash, taqsimlangan trening.
Deeplearning4j : Java va Scala- da ko'p grafik protsessorli Spark-da chuqur o'rganish .
Flux : Julia tilida yozilgan RNN uchun interfeyslarni, shu jumladan GRU va LSTMlarni o'z ichiga oladi .
Keras : Yuqori darajadagi API, boshqa ko'plab chuqur o'rganish kutubxonalariga o'ramni taqdim etadi.
Microsoft kognitiv asboblar to'plami
MXNet : chuqur neyron tarmoqlarni o'rgatish va o'rnatish uchun ishlatiladigan ochiq manba chuqur o'rganish tizimi.
PyTorch : Tensorlar va Python-da GPU tezlashishi bilan dinamik neyron tarmoqlar.
TensorFlow : CPU, GPU va Google xususiy TPU , [87] mobil qurilmalarini qo'llab-quvvatlaydigan Apache 2.0 litsenziyali Theanoga o'xshash kutubxona
Theano : NumPy kutubxonasi bilan asosan mos keladigan API bilan Python uchun chuqur o'rganish kutubxonasi .
Torch : C va Lua tillarida yozilgan mashinani o'rganish algoritmlarini qo'llab-quvvatlaydigan ilmiy hisoblash tizimi .