|
RNN-Takroriy neyron tarmoq (Recurrent neural network) tahlili
|
| bet | 3/5 | | Sana | 26.05.2023 | | Hajmi | 0.77 Mb. | | #65129 |
Bog'liq Sun\'iy intellekt uzoq yo\'lni bosib o\'tish jarayonida kerakli taj 12945051.3. RNN-Takroriy neyron tarmoq (Recurrent neural network) tahlili
Takroriy neyron tarmoq (RNN) - bu tugunlar orasidagi bog'lanishlar vaqt ketma-ketligida yo'naltirilgan grafika hosil qiladigan sun'iy neyron tarmoqlari klassi. Bu vaqt o'tishi bilan dinamik xatti-harakatlarni namoyish etishga imkon beradi. Oldinga yo'naltirilgan neyron tarmoqlaridan kelib chiqqan holda, RNNlar o'zlarining ichki holatidan (xotirasidan) foydalanib, o'zgaruvchan uzunlikdagi ma'lumotlarning ketma-ketligini qayta ishlashlari mumkin. Bu ularni qo'l bilan yozishni ajratib bo'lmaydigan bog'lanish yoki nutqni tanib olish kabi vazifalarga moslashtiradi. RNN-ning g'oyasi ma'lumotni doimiy ravishda ishlatishdir. An'anaviy neyron tarmoqlarida barcha kirish va chiqishlar mustaqil deb qabul qilinadi. Ammo bu ko'p vazifalar uchun mos emas. RNNlar takroriy deb nomlanadi, chunki ular ketma-ketlikning har bir elementi uchun bir xil vazifani bajaradilar, natijada chiqishlar oldingi hisob-kitoblarga bog'liq bo’ladi. RNNlarning yana bir talqini: bular avvalgi ma'lumotlarni hisobga oladigan "xotirasi" bo'lgan tarmoqlardir.
"Qayta tiklanadigan asab tarmog'i" atamasi bir-biridan cheklangan, ikkinchisi cheksiz impuls bo'lgan o'xshash umumiy tuzilishga ega bo'lgan ikkita keng tarmoq toifasiga taalluqli ravishda ajratilgan holda ishlatiladi. Ikkala tarmoq tarmoqlari ham vaqt o'tishi bilan dinamik harakatlarni namoyish etadi. Cheklangan impulsli takrorlanuvchi tarmoq - bu kengaytiriladigan va uning o'rnini qat'iy oziqlanadigan neyron tarmog'i bilan almashtirish mumkin bo'lgan yo'naltirilgan asiklik grafik, cheklanmagan impulsli takrorlanadigan tarmoq esa kengaytirilmaydigan yo'naltirilgan tsiklik grafikadir. Ham cheklangan impuls, ham cheksiz impulsli takrorlanadigan tarmoqlar qo'shimcha saqlangan holatlarga ega bo'lishi mumkin va do'kon to'g'ridan-to'g'ri neyron tarmoq tomonidan boshqarilishi mumkin. Qayta tiklanadigan neyron tarmoqlar 1986 yil Devid Ramelxartning ishiga asoslangan edi. Hopfild tarmoqlari - RNNning maxsus turi - Jon Xopfild tomonidan 1982 yilda kashf etilgan. 1993 yilda asab tizimining kompressor tizimi "juda chuqur o'rganish" muammosini hal qildi, bu vaqt o'tishi bilan joylashtirilgan RNNda 1000 dan ortiq keyingi qatlamlarni talab qildi.
1.3.1-rasm: Neyron tarmoq arxitekturasi
|
| |
