Recurrent Neural Network

Beshinchi qism

Tensorflow-da RNNni amalga oshirish

1. RNN Tensorflowni amalga oshirish

• Eng yaxshi usul Tensorflow veb-saytidagi hujjatlarni o'qishdir
• Faraz qilaylik, siz Tensorflow-da CNN-dan qanday foydalanishni allaqachon bilasiz (o'yinchoqlar ketma-ketligi dekoder modeli)

1. RNN Tensorflowni amalga oshirish

• Standart tasma lug'ati xuddi Tensorflow'dagi boshqa CNN modeli kabi
• So'zlarni joylashtirish (gapdagi so'zlarni dastur tomonidan tushunarli qilish)

Ma'lumotnomalar

Slaydlardagi materiallarning aksariyati quyidagi darslik / ma'ruza slaydlaridan olingan:

• Mashinani o'rganish I 14-hafta: Ketma-ket o'rganishga kirish, Aleks Graves, Technische Universitaet Muenchen.
• CSC2535 2013: Ilg'or Mashinani o'rganish, 10-ma'ruza: Takroriy neyron tarmoqlar, Jeffri Xinton, Toronto universiteti.
• CS224d Deep NLP, 8-ma'ruza: Recurrent Neyron Networks, Richard Socher, Stenford universiteti.
• Takroriy neyron tarmoqlari bilan nazorat qilinadigan ketma-ketlikni belgilash, Aleks Graves, Doktorlar der Naturwissenschaften (Dr. rer. nat.)genehmigten dissertatsiyasi.
• Takroriy neyron tarmoqlarining asossiz samaradorligi, Andrey Karpati, Hackerning Neyron bo'yicha qo'llanmasi haqida blogTarmoqlar.
• LSTM tarmoqlarini tushunish, Kristofer Olah, github blogi.

Boshqa havolalar

• Kiros, Rayan va boshqalar. "O'tkazib yuborilgan fikr vektorlari." Neyron axborotni qayta ishlash tizimlaridagi yutuqlar. 2015 yil.
• Dauphin, Yann N., va boshqalar. "Gated konvolyutsion tarmoqlar bilan tilni modellashtirish." arXiv preprint arXiv:1612.08083 (2016).
• Gregor, Karol va boshqalar. "DRAW: tasvirni yaratish uchun takroriy neyron tarmoq." arXiv preprint arXiv: 1502.04623 (2015).

Ma'lumotnomalar

• Chu, Hang, Raquel Urtasun va Sanja Fidler. "PI dan qo'shiq: PopMusic avlodi uchun musiqiy jihatdan ishonchli tarmoq." arXiv preprint arXiv: 1611.03477 (2016).
• Zheng, Shuai va boshqalar. "Shartli tasodifiy maydonlar takrorlanuvchi neyron tarmoqlar sifatida." Kompyuterni ko'rish bo'yicha IEEE Xalqaro konferentsiyasi materiallari. 2015.
• Ramanathan, Vignesh va boshqalar. "Ko'p odamli videolarda voqealar va asosiy aktyorlarni aniqlash." arXivpreprintarXiv: 1511.02917 (2015).
• Shoh, Rajiv va Rob Romijnders. "Basketbol traektoriyalariga chuqur o'rganishni qo'llash". arXivpreprint arXiv:1608.03793 (2016).
• Baccouche, Moez va boshqalar. "Uzoq muddatli qisqa muddatli xotira va takroriy neyron tarmoqlarga ega futbol videolaridagi harakatlar tasnifi." Sun'iy neyron tarmoqlar bo'yicha xalqaro konferentsiya. Springer Berlin Heidelberg, 2010.
• Chung, Junyoung va boshqalar. "Geded recurrent neyron tarmoqlarini ketma-ketlikda empirik baholashmodellashtirish." arXiv preprint arXiv:1412.3555 (2014).
• Chung, Junyoung va boshqalar. "Gated feedback recurrent neyron networks." CoRR, abs/1502.02367(2015).
• Tensorflow bo'yicha darsliklar. https:// www.tensorflow.org/tutorials/

RAHMAT