Морфологический анализ


Лексико-грамматический анализ в естественных языках


Download 22.56 Kb.
bet4/7
Sana23.02.2023
Hajmi22.56 Kb.
#1225284
1   2   3   4   5   6   7
Bog'liq
Морфологический анализ

Лексико-грамматический анализ в естественных языках
Он является промежуточным между морфологическими и синтаксическими анализами, так как готовят почву только для синтаксического анализа.
POS – part of speech (= tagging) тэгирация. = морфолого-синтаксическая разметка текста.
Задача ЛТА – автоматически распознать к какой части речи принадлежит слово в тексте. Данную задачу решают с помощью морфологической разметки текста, т.е. использует морфологический анализ и в основе лежат 2 основных алгоритма.

  1. вероятно-статистический. Использует словарь синтаксических форм языка с соответствующими морфологическими классами, и базируются на информационной встречаемости всех возможных последующих грамматических классов.

  2. основанный на продукциях (если,…. то).

Пример: если морфологические формы могут быть как глаголом, так и существительным, и перед ней стоит артикль, то это морфологическая форма существительного.
Оба подхода хороши и правильного анализа достигает 90 %. Вводят даже специальные стандарты, чтобы унифицировать систему автоматического анализа естественного языка.

  1. Morfologik tahlil. Turlari ma. Morfoanalizatorlar uchun lingvistik yordam (Zaliznyak lug'ati va boshqalar). Leksik-grammatik tahlil va belgilash (pos-teglash). Foydalanish sohalari.


Morfologik tahlil

  1. Agar an'anaviy tilshunoslikda morfologiya faqat so'zning shakliga ishora qilish deb tushunilsa, AOT tizimlarida morfologik tahlil matndagi so'zning shakli yoki tashqi dizaynidan lingvistik tuzilishning turli darajalari haqida ma'lumot olish mumkin bo'lgan protsedurani anglatadi. . Shunday qilib, morfologik tahlil tushunchasi amaliy tilshunoslikda shakllandi va mashina tarjimasida keng qo‘llanildi. Mashina tarjimasi yo'nalishidagi ishlarning birinchi yilida fan bilan ko'plab morfologik tahlil algoritmlari taklif qilindi. Bugungi kunga kelib, bu vazifa eng qiyin hisoblanadi, chunki turli tillar uchun juda ko'p yaxshi ishlaydigan morfologik tahlil algoritmlari mavjud.

Shunday qilib, morfologik tahlil tushunchasi operativ tushunchadir va agar an'anaviy tilshunoslikda u faqat so'z shakllarini tavsiflovchi narsani nazarda tutsa va "nima tasniflanadi?" Degan savolga javob beradigan bo'lsa, hisoblash tilshunosligida nima muhim emas, balki bu qanday? yoki ma'lumot matndagi so'z shaklidan olingan.
Morfologik tahlil kirish matnini uning morfologik tuzilishiga aylantirish bo‘lsa, morfologik tahlil birligi esa matn bo‘linadigan so‘z shakli hisoblanadi.
Morfologik tuzilish matn tarkibiga kiruvchi so‘z shakllarining morfologik tuzilmalari ketma-ketligi bo‘lib, bu elementlar matndagi mos keladigan so‘z shakllari bilan bir xil tartibda joylashadi.
So‘z shaklining morfologik tuzilishi uning nomi yoki grammatik belgilar yig‘indisiga mos keladigan leksemadir.
Kompyuter morfologiyasining funktsiyalariga quyidagilar kiradi:
1. so‘zning barcha shakllarini olish
2. so‘zni berilgan shaklda o‘rnatish
3. so'z shaklining grammatik xususiyatlarini olish.

Download 22.56 Kb.

Do'stlaringiz bilan baham:
1   2   3   4   5   6   7




Ma'lumotlar bazasi mualliflik huquqi bilan himoyalangan ©fayllar.org 2024
ma'muriyatiga murojaat qiling