Davom Etish: Yangi parametrlar bilan neyron tarmoqda yana bir marta to'g'ri hisoblashni boshlash.
Konvergensiya: Natijalarning optimal qiymatlariga (ideallik) yetishish jarayoni davom etadi.
Error backpropagation usuli, ta'lim jarayonida o'rganilgan natijalarni to'g'ri hisoblash va parametrlarni yangilashda ishlatiladi. Bu usul, neyron tarmoq tizimlarini va shuningdek, masofaviy o'rganuvchan (deep learning) modellarini o'rgatishda keng qo'llaniladi.
Tabiiy tillarni qayta ishlash. Til korpuslari, Matnlar ustida amallar. (Natural language processing, language corpora, text processing):
Tabiiy tillarni qayta ishlash (Natural Language Processing, NLP) so'zlashni, yozishni, o'qishni va fikrlarni tahlil qilishni o'z ichiga olgan multidisiplinar soha hisoblanadi. Bu soha matnlarni avtomatlashtirilgan tarzda tahlil qilish va tushunish uchun matematik, statistika va informatika asosida tuzilgan. Quyidagi muhim kontseptlarga e'tibor bering:
Til Korpuslari (Language Corpora): NLP sohasida ishlovchi dasturlash tizimlarini o'rgatish uchun til korpuslari keng qo'llaniladi. Til korpusi, boshqa matnlarning tizimida saqlangan, ko'p tildagi so'zlar, so'z birliklari va qo'shimcha lingvistik ma'lumotlar to'plami hisoblanadi. Masalan, Wikipedia, gazeta maqolalari, shoir va yozuvchilarning asarlari kabi matnlar.
Matn Tahlili (Text Analysis): Matnlarni tahlil qilish, matnlardan ma'lumotni chiqarish va uni tahlil qilish uchun metodlar ishlatish NLPning asosiy qismi hisoblanadi. Bu tahlilning o'z ichiga olgan amallar quyidagilardan iborat bo'lishi mumkin:
So'z Hisoblagichlari: Matnda qancha so'z bo'lishi.
So'z Qatlamalari: So'zlar qanday qatlamalar orqali birlashtirilgan.
Part-of-Speech (POS) Tahlili: Har bir so'zing qanday tildan yoki ma'noni bildiruvchi partiya (qisqartma POS) tahlili.
Ngram Tahlili: Matnda qatnashgan so'zlar yoki so'z birliklari va ularning ko'rsatkichlari (n-gram) tahlili.
Do'stlaringiz bilan baham: |
