O‘zbekiston respublikasi axborot texnologiyalari va kommunikatsiyalarini rivojlantirish vazirligi muhammad al-xorazmiy nomidagi toshkent axborot texnologiyalari universiteti farg’ona filliali


Download 227.5 Kb.
bet1/2
Sana22.09.2023
Hajmi227.5 Kb.
#1684276
  1   2
Bog'liq
Ma’lumotlar ombori-fayllar




O‘ZBEKISTON RESPUBLIKASI AXBOROT TEXNOLOGIYALARI VA
KOMMUNIKATSIYALARINI RIVOJLANTIRISH VAZIRLIGI
MUHAMMAD AL-XORAZMIY NOMIDAGI
TOSHKENT AXBOROT TEXNOLOGIYALARI UNIVERSITETI FARG’ONA FILLIALI

Mustaqil ishi



Mavzu: Ma’lumotlarga ishlov berish.
Fayllar va ma’lumotlar ombori .
Guruh: 713-19
Bajardi: Jakbaraliyev Jamshidbek
Tekshirdi:


Ma’lumotlarga ishlov berish.
Fayllar va ma’lumotlar ombori .

Reja:

  1. Ma’lumotlarga ishlov beruvchi axborot texnologiyalari

  2. Ma’lumotlar ombori

  3. Obyekt va kattalik

  4. Ma’lumotlar omborini boshqarish tizimlari.

  5. Ma’lumotlar ombori

  6. Ma’lumotlar omborining tarkibiy qismlari

  7. Foydalanilgan adabiyotlar ro`yxati

Ma’lumotlarga ishlov beruvchi axborot texnologiyalari. Ular ma’lum algoritmlar bo‘yicha boshlang‘ich ma’lumotlarga ishlov beruvchi masalalarni yechishga mo‘ljallangan. Masalan, har bir firmada o‘zining xodimlari haqidagi axborotga ishlov beruvchi axborot texnologiyasi albatta bo‘lishi kerak.
Boshqarishning axborot texnologiyalari. Ularning maqsadi ish faoliyati qaror qabul qilish bilan bog‘liq bo‘lgan insonlarning axborotga bo‘lgan talabini qondirishdan iborat. Boshqarishning axborot tizimlari tashkilotning o‘tmishi, hozirgi holati va kelajagi haqidagi axborotni ham o‘z ichiga oladi.
Ofis(idora)ning axborot texnologiyasi. Avtomatlashtirilgan ofisning zamonaviy axborot texnologiyalari bu — tashkilot ichidagi va tashqi muhit bilan kommunikatsion jarayonlarni kompyuter tarmoqlari va axborotlar bilan ishlovchi boshqa zamonaviy vositalar asosida tashkil etish va qo‘llab-quvvatlashdan iborat. Buning uchun maxsus dasturiy vositalar ham ishlab chiqilgan. Ulardan biri Microsoft Office dasturlar paketidir. Uning tarkibiga Word matn muharriri, Excel elektron jadvali, Power point taqdimot dasturi, Microsoft Access ma’lumotlar omborini boshqarish tizimlari kiradi. Dastur - 1) biron-bir faoliyat, ishning mazmuni va rejasi; 2) siyosiy partiyalar, tashkilotlar, alohida arboblar faoliyatining asosiy qoidalari va maqsadlari bayoni; 3) oʻquv fani mazmunining qisqacha izohi; 4) teatr, konsertlar va b. Hozirgi paytdagi kompyuterlar uchun ko‘plab dasturiy vositalar mavjudki, ular barcha turdagi axborot texnologiyalarini ta’minlay oladi. Ma’lumotlar ombori. Har qanday axborot texnologiyasining majburiy komponenti ma’lumotlar omboridir (MO). Avtomatlashtirilgan ofisda MO firmaning ishlab chiqarish tizimi haqidagi barcha ma’lumotlarni o‘zida saqlaydi. Matn protsessori. Bu matnli hujjatlarni tashkil etish va ularga ishlov berishga mo‘ljallangan dasturiy vosita turidir. Masalan, matn muharririda tayyorlangan xat va hujjatlarni doimiy ravishda qabul qilish menedjerga firmadagi holatni doimo nazorati ostida tutishga yordam beradi. Elektron pochta (E-mail) — kompyuterlardan tarmoqda foydalanishga asoslangan bo‘lib, hamkorlarga ma’lumotlar junatish yoki ulardan ma’lumot olish imkoniyatini yaratadi. Audiopochta — bu ma’lumotlarni klaviatura yordamida emas, balki tovush orqali uzatuvchi pochtadir.
Ma’lumotlar omborini tashkil etuvchi elementlar turli ko‘rinishda bo‘lishi mumkin. Eng ko‘p tarqalgan va amaliyotda qo‘llaniladigan ma’lumotlar matnli fayllar hisoblanadi. Chunki matnli fayllar orqali turli axborotlarni ifodalash va kompyuter xotirasida saqlash mumkin.

Kompyuterlar asosidagi axborot texnologiyalarining ko‘rinishlaridan biri ma’lumotlar ombori hisoblanadi. Oddiy fayllarda farqli ravishda ma’lumotlar ombori kmpyuter xotirasida joylashgan axborotlarni izlash va saralashni amalgam oshirish imkoniyati bor.

Ma’lumotlar ombori deb, kompyuterning uzoq muddatli xotirasida saqlanayotgan axborotlar va ular ustida aniq bir ishlash usullariga mikon beradigan ma’lumotlar yig‘indisiga aytiladi.

Ma’lumotlar omborida turli ma’lumotl-ar saqlanishi mumkin. Masalan, poyezd, samolyot, avtobuslarning harakatlanish jadvali, do‘kon yoki ombordagi mahsulotlarning mavjudligi haqidagi ma’lumotlar, talaba, o‘qituvchi va xodimlar, shuningdek, kitoblar haqidagi ma’lumot va boshqalar ma’lumotlar omboriga misol bo‘la oladi.

Ma’lumotlar omborini yaratish va uni ishlatish uchun shaxsiy kompyuterdan foydalanish shart emas. Masalan, shifokorning qabulxonasidagi bemorlar kartotekasini ma’lumotlar ombori deb hisoblash mumkin (kartotekalar qog‘ozdan yoki kartonlardan foydalanib bajarilgan bo‘lishi mumkin).

Masalan, shifokor kompyuterda matn fayllarni yaratishni o‘rganib, bemorlar kartotekalarini bir nechta fayllarda yozib “kompyuterli” ma’lumotlar omborini hosil qilishi mumkin. Alllbatta, bunday ma’lumotlar omboridan foydalanilganda bemorlarni hisobga olish va kerakli hujjatlarni tayyorlash (bemorga ma’lumotnoma berish, retsept yozish va h.k.) ancha tez bajariladi.

Ma’lumotlar omborini axborotlarni kompyuterlashgan shakldagi alohida yig‘indisi deb tushunish mumkin. Biror kutubxonadagi barcha kitoblar yoki butun dunyoda chiqayotgan jurnallardagi matematik tadqiqotlar haqidagi barcha maqolalar ro‘yhatining jamlanishi ma’lumotlar omboriga misol bo‘lishi mumkin.

Yer yuzida keng foydalanilayotgan mavjud 3000 ma’lumotlar omborlaridan ko‘p qismini xususiy kompyuterlarda yaratilgan. Ular omborlarda qanday ma’lumotlarni saqlash, axborotni qanday yig‘ish, qanday yangilash va rasmiylashtirish kerakligi masalaarini hal etishgan. Ma’lumotlar ombori ham ular joylashgan mamlakatlar kabi turli-tumandir. Ba’zi axborot tizimlari katta emas. Masalan, Avstraliyadagi “Ausinet” tizimi 17 omborga, Amerikaning “DAYALOG” tizimi 250 dan ortiq omborga ega. Ko‘pchilik tizimlar o‘rtacha o‘lchamlarga ega. Shvetsariyaning “Data – Star” tizimi 46, G‘arbiy Germaniyaning “INKA” tizimi 42, fransiyaning “Kestel” tizimi 45, Buyuk Britaniyaning “Pergamon Infolayn” tizimi 35 omborga ega.

Ma’lumotlar omboridagi axborotlar bir necha usullar bilan tashkil etilishi mumkin. Ma’lumotlar omborlarining eng soda va keng tarqalgan shakli jadval ko‘rinishidir. Ma’lumotlar omborining bunday ko‘rinishi relyatsion omborlar deb ataladi. Relyatsion omborlar aniq sondagi ustunlarga ega bo‘lib, ularning hammasi nomlarga ega bo‘ladi.

Kompyuterdan aksariyat hollarda matnli fayllar (turli xat, referat, she’r va h.k.) ni yaratishda foydalaniladi. Foydalanuvchining tajribasi oshib brogan sari u matnli fayllar o‘rnida turli shakldagi va berilgan vazifalarni bajaruvchu fayllardan foydalana boshlaydi. Masalan, matn fayl ichida turli xil sonli, belgili ma’lumotlarni kiritish orqali jadvalli, kartotekali, videotekali, tashkilotlar manzili, kasallik varaqlari, telefon nomerlari va boshqa ma’lumotlarni jamlovchi ombor sifatida foydalanishi mumkin.

Har qanday ma’lumotlar omborining vazifasi haqiqiy dunyoning obyektlar haqidagi ma’lumotlarni qayta ishlashidir. Umuman olganda, “obyekt” va “kattalik” degan iboralarni rasman ajratish mushkul. Lekin muayyan vaziyatda bu iboralarni ishlatish uchun ularni ta’riflashimiz mumkin.

Obyekt – mavjud bo‘lgan va o‘ziga o‘xshash narsalardan ajralib turadigan alohida olingan predmet. Masalan, akademik litsey yoki kasb-hunar kolleji obyekt hisoblanadi. Shuningdek, kimyoviy modda, biror qotishma, firma, zavod, inson hamobyekt bo‘la oladi.

Obyekt sifatida nafaqat moddiy predmetlar, balki haqiqiy dunyoni aks ettiruvchi abstract tushunchalar ham qaralishi mumkin. Masalan, san’at asarlari, kitoblar, teatrlardagi sahna ko‘rinishlari, kinofilmlar, huquqiy normalar, falsafiy nazariyalar va boshqalar.

Bunga o‘xshash obyektalar guruhi obyektlar to‘plamini hosil qiladi. Masalan, akademik litsey yoki kasb-hunar kollejlaridagi guruhlar, firmalar, ombordagi mahsulotlar, korxonada ishlovchi odamlar obyektlar to‘plamini hosil qiladi. Bunday guruhdagi muayyan obyektni obyekt nusxasi db atash mumkin.

Kattalik – biror-bir obyektni ifodalovchi va uning muayyan bir nusxasi uchun berilgan sonli yoki matnli qiymatni belgilovchi ko‘rsatkich. Masalan, obyektlar to‘plami sifatida biror akademik litsey yoki kasb-hunar kollejidagi guruhlarni olaylik. Berilgan guruhdagi o‘quvchilar soni va hokazolar kattaliklar hisoblanadi.

Yuqorida ko‘rsatilganlarni hisobga olgan holda shuni aytish mumkinki, axborot tizimini loyihalovchining eng muhim vazifasiga obyektlar va ularni tavsiflovchi ma’lumotlarni tanlash, ma’lumotlar orasidagi bog‘lanishni o‘rnatish kiradi. Axborot tizimi o‘lchami va vazifasiga ko‘ra obyektlar u yoki bu darajadagi o‘zgaradigan ma’lumotlar bilan xarakterlanishi mumkin.

Shaxsiy kompyuterlar hisoblash texnikasi vositalarining yangi sinfini tashkil etadi. Ular axborotlarni qayta ishlashning yuqori kafolatlanishi, arzonligi, ixchamligi, turli amallarni bajara olishi, kam elektr quvvatini sarflashi bilan ajralib turadi. Bu xususiyatlar kompyuterlar asosida keng vazifalarga mo‘ljallangan avtomatlashgan ishchi joylari (AIJ) ni yaratish imkonini beradi.

Kompyuterda ma’lumotlar omborini hosil qilish va ular bilan ishlash uchun maxsus dasturlar yaratiladi. Keyingi yillarda chiqarilayotgan kompyuterlarda amal bajarish tezligining juda kattaligi (100 mlrd/s) va uning uning xotirasi kengayganligi (40 – 60 Gb) katta imkoniyatlarga ega bo‘lgan ma’lumotlar omborini yaratish imkonini bermoqda.

Kompyuterda ma’lumotlar omborini yaratish va uni ishlatishni belgilovchi ikkita omil mavjud: birinchi omil – qanday mazmunga ega bo‘lgan ma’lumotlar (ya’ni ularni tashkillashtirish) va ikkinchisi – yig‘ilgan ma’lumotlardan qanday foydalanish kerakligidir. Masalan, xodimlar ro‘yxatini qayta ishlovchi turli xildagi dasturlar mavjud. Lekin bunday dasturlar biror kishining familiyasini izlash yoki haqda biror ma’lumotni topishga (ajratishga) qarab bir-biridan jiddiy farq qiladi. Budan tashqari, har ir berilgan soha uchun o‘zining dasturi ishlab chiqilishi kerak. Masalan, kimyoviy moddalar haqidagi ma’lumotlar ombori uchun mo‘ljallangan dasturlar aviapassajirlar ro‘yxatini qayta ishlash uchun umuman yaroqsizdir.

Ma’lumotlar omboridan foydalanish uchun maxsus dasturlar yaratiladi va bunday dasturlar ma’lumotlar omborini boshqarish tizimi deb ataladi. Ma’lumotlar omborida axborotlar asosan matn va raqam ko‘rinishida saqlanadi.

Ma’lumotlar omborini boshqarish tizimi vazifasiga ma’lumotlar omborini boshqarishning quyidagi xususiyatlari kirishi mumkin:

  • Ma’lumotlar omboriga kirish: faydalanuvchining talabiga javoban axborot turidan qat’I nazar unga qulay ko‘rinishda javob berish.


  • Ma’lumotlarni modifikatsiyalash: berilgan axborotni foydalanuvchi talabiga mos holda (texnik imkoniyatlari hisobga olingan holda) o‘zgartirish.


  • Ishonchlilik darajasi: qurilmalar tasodifan to‘xtatilganda ma’lumotlar omborining qayta tiklanish qobiliyati.


  • Ma’lumotlarni himoyalash: ma’lumotlar omboridan ruxsatsiz (sanksiyasiz) foydalanishning cheklanganligi.


  • Ma’lumotlar omboridan tarmoqda foydalanish: ma’lumotlardan bir vaqtda bir necha kishining bir-biriga xalaqit bermasdan foydalanishi.


Ma’lumotlar omborini boshqarish tizimi o‘zining ma’lum ko‘rinishidagi ichki tuzilishiga, amalgam oshiruvchi amaliy dasturlarga ega bo‘lishi kerak. Bunday dasturlar ikki turga: integrallashgan (umumlashtirilgan) va paketli dasturlarga ajratiladi.

Integrallashgan dasturlar avtomatlashgan ishchi joylari yaratishning asosini tashkil etadi. Bunday tizimlar quyidagilarni amalgam oshirishni ta’minlaydi:

  • muammoli yo‘naltirilgan axborotlarni kiritishning qulayligi;


  • oldin kiritigan axborotlardan foydalanishning yengilligi;


  • mmmurakkab strukturali hujjatlarni qayta ishlash va shakllantirish;


  • shaxsiy kartotekalar, ishchi kalendarlar, yozuv daftarlari va boshqa vositalarni yaratishning mumkinligi.


Hozirgi kunda integrallashgan dasturlarga nisbatan paketli dasturlar ko‘proq foydalaniladi.

Keng tarqalgan paketli dasturlarga matnli axborotlarni qayta ishlash (Word), “Elektron jadvallar” va ma’lumotlar omborini qayta ishlash tizimlari misol bo‘ladi. Keng tarqalganligi bo‘yicha “Ishchi grafiklar” tizimi va kommunikatsiya tizimlari keyingi o‘rinda turadi.

Ma’lumotlar ombori haqida tushuncha.

Inson o’z hayoti davomida ko’plab axborotlar bilan ishlaydi. Ular biron-bir narsa yoki jarayonga aloqador (masalan, tabiyat, jamiyat, ular orasidagi munosobatlar va hokazo) ma’lumotlar bo’lishi mumkin.

Narsa yoki jarayonni o’rganishda ularni obyekt deb atash qabul qilingan. Har bir obyekt o’ziga xos xususiyatlarga ega.

Obyektlarni o’rganish jarayonida ular haqida ma’lumotlar yig’iladi, saqlanadi, qayta ishlanadi va uzatiladi. Axborotlarni yig’ish, saqlash, qayta ishlash va uzatishning ko’plab usullari mavjud. Kompyuterlar yaratilgunga qadar axborotlar bilan ishlash, asosan qog’ozda amalgam oshirilar edi. Masalan, ma’lumotlar yig’ma jildlarda saqlangan, ularni uzatish esa odatdagi pochta orqali amalga oshirilgan. Hozirgi kunda ham bu usuldan voz kechilganicha yo’q. Lekin bugungi kunda, ya’ni axborotlar asri davrida katta hajmdagi ma’lumotlarni odatdagi usullar orqali qayta ishlab bo’lmaydi. Ma’lumki, axborotlarni saqlash, qayta ishlash va uzatish kompyuterning asosiy vazifalaridan biridir.

Kompyuterda ham axborotlarni turli usulda saqlash mumkin. Masalan, matn muharrirlari va protsessorlari (Blknot yoki MS Word dasturlari) yordamida katta hajmdagi axborotlarni saqlash mumkin. Lekin axborotlarni matn muharrirlari yoki protsessorlari yordamida saqlash va ular bilan ishlash axborotlarni qog’ozda saqlash va kerakli ma’lumotlarni izlash bilan deyarli teng. Ikkinchi tomondan, katta hajmdagi ma’lumotlar ichidan kerakli ma’lumotni tezda topish uchun bu ma’lumotlarni ma’lum bir tartibda saqlash talab etiladi.


Ma’lumotlar bilan ishlashda kompyuter imkoniyatlaridan foydalanib, u holda barcha ishni aftomatlashtirish mumkin. Lekin shunda ham avval barcha ma’lumotlarni kompyuter xotirasiga kiritib olish zarur.

Bugungi kunda ma’lumotlar bilan ishlashni kompyuterlar yordamida avtomatlashtirish deyarli barcha sohada qo’llanib kelinmoqda. Masalan, avtomobillar va ularning egalari haqidagi ma’lumotlar, fuqarolarning passport ma’lumotlari, shahar telefon ma’lumotnomalari va boshqalar.

Ma’lumotlar ombori o’zi nima?

Ma’lumotlar ombori – aniq bir sohaga tegishli ma’lumotlarning strukturalangan va o’z nomiga ega bo’lgan majmui.

Ma’lumotlarni struktaralash – ma’lumotlarni ma’lum xususiyatlari bo’yicha birlashtirish.

Masalan, korxonaning ma’lumotlar omborida quyidagi axborotlar saqlanishi mumkin:

  • Korxonaning ishchi xizmatchilari haqidagi barcha ma’lumotlar.


  • Korxonaning moddiy va texnik bazasi haqidagi ma’lumotlar.


  • Omborlardagi zahiralar haqidagi ma’lumotlar.


  • Tayyor maxsulotlar haqidagi ma’lumotlar va hokazo.


Kompyuterlarda bu kabi ma’lumotlarni qayta ishlash uchun ma’lumotlar strukturasini belgilab olish kerak. Ma’lumotlar omborini tashkil etishda axborotlarni saqlash talab qilinadi.

Ma’lumotlar omborida ustunlar Maydon , satrlar – Yozuv, Maydon va yozuvlar kesish katakchalari esa - Rekvizit deb yuritiladi.

Maydon – ma’lumotlar ombori strukturasini belgilaydi.

Yozuv – o’zaro mantiqan bog’langan maydonlar majmui bo’lib, biror obyektning asosiy xususiyatlarini ifodalaydi.

Ma’lumotlar ombori strukturasini to’laroq tushunib olish uchun bir misol ko’ramiz. Ma’lumot kiritilmagan birgina maydonlar belgilangan 9-sinf o’quvchilari haqidagi bo’sh ma’lumotlar omborini tasavvur qiling. Ma’lumotlar omborini tashkil qilish uchun quyidagicha jadval tuzib olinadi.



Familiyasi

Ismi

Otasining ismi

Tug’ilgan sana


Telefon raqami


Qiziqishi


1

Qurbonov

Bexruz

Qaxramon

1993.11.02


296-88-11


Sport















Bu jadvalda ma’lum bir axborot saqlanmoqda - bu ma’lumotlar ombori strukturasi, ya’ni maydonlar to’plamidir. Maydonlar jadvalga qaysi ma’lumotlar va qanday ko’rinishda kiritilishini belgilaydi.

Ma’lumotlar omborining xususiyatiga qarab , unda axborotlar uch xil shaklda saqlanadi:


1) Iyerarxik (chiziqli) 2) To’rli 3) Relatsion (jadvalli)

Ma’lumotlarning iyerarxik shakli ularni qayta ishlash uchun eng qulay hisoblanadi. Uni quyidagi misolda ko’ramiz.
Misol. Axborotlar omboridan Toshkent shahar , Qorasuv 8-dahasi, 104-uy, 87-xonadonni izlab keluvchi mexmonning yo’nalishi quyidagicha bo’ladi:

1. Barcha davlatlar ichidan O’zbekistonni topadi.

2. O’zbekiston hududidagi barcha shaharlar orasidan Toshkentni tanlaydi.

3. Toshkent shahridagi dahalardan Qorasuv – 8 ni topadi.

4. Qorasuv 8-dahasidagi barcha uylardan 104-uyni topadi.

5. Xonadonlar orasidan kerakli 87-xonadonni izlaydi,

Ma’lumotning bunday ko’rinishi iyyerxik shakli deb nomlanadi.

Agar yuqoridagi misollar biror pog’onadagi ma’lumotlar boshqa pog’onadagi ma’lumotlar bilan ikki yoki undan ortiq marta bog’lansa, ma’lumotlarning bunday shakli to’rli shakl deb nomlanadi.



Iyerarxik va to’rli modellarning sxematik ko’rinishi.

Yuqoridagi sxema ko’rinishida ifodalash nisbatan qiyin bo’lgan ma’lumotlar ham bor. Masalan, 9-sinf o’quvchilari haqidagi ma’lumotlarni quyidagi keltirilgan jadval ko’rinishida ifodalash juda qulay.


Familyasi

Ismi

Otasining ismi

Tug’ilgan sana


Telefon raqami


Qiziqishi


1

Azimova

Malika

Azim qizi

1991

189-45-34

Shaxmat

2

Begmatov


Shahob

Bahrom o’g’li

1991

342-43-41

Futbol

Ma’lumotlarning bunday ko’rinishi Relyatsion shakl deb yuritiladi.

Ma'lumotlarni saqlash nima?

Ma'lumotlarni saqlash (DW) turli manbalardan ma'lumotlarni to'plash va boshqarish uchun mazmunli biznes-tushunchalarni taqdim etish jarayonidir. Ma'lumotlar ombori odatda heterojen manbalardan biznes ma'lumotlarini ulash va tahlil qilish uchun ishlatiladi. Ma'lumotlar ombori-ma'lumotlarni tahlil qilish va hisobot berish uchun qurilgan BI tizimining o'zagi.

Bu ma'lumotlarning strategik ishlatilishiga yordam beradigan texnologiyalar va komponentlarning aralashmasi. Tranzaktsiyalarni qayta ishlash o'rniga so'rov va tahlil qilish uchun mo'ljallangan biznes tomonidan katta hajmdagi axborotni elektron saqlashdir. Ma'lumotlarni axborotga aylantirish va uni foydalanuvchilarga o'z vaqtida farq qilish jarayonidir.

QCDga bo'lgan ehtiyoj o'tgan asrning 90-yillarida, korxona sektori turli xil biznes ko'rsatkichlarini hisobga olish uchun turli xil axborot tizimlaridan faol foydalanishni boshlaganda paydo bo'ldi. Har bir bunday dastur mahalliy ishlab chiqarish jarayonini avtomatlashtirish muammosini muvaffaqiyatli hal qildi, masalan, buxgalteriya hisob-kitoblarini bajarish, operatsiyalarni o'tkazish, kadrlar bo'yicha tahlil va hk.

Shu bilan birga, bir tizimdagi ma'lumotnoma va tranzaksiya ma'lumotlarini taqdim etish sxemalari (modellari) boshqasidan tubdan farq qilishi mumkin, bu esa ma'lumotlarning nomuvofiqligini keltirib chiqaradi. Biz NSI menejmenti nuqtai nazaridan Ma'lumotlarni boshqarish masalasiga qisman to'xtaldik . Bundan tashqari, ma'lumotlar modellarining xilma-xilligi, barcha amaliy tizimlarning yaxlit tasviri zarur bo'lganda konsolidatsiyalangan hisobotni olishni qiyinlashtiradi. Shuning uchun korporativ ma'lumotlar omborlari (Data Warehouse, DWH) paydo bo'ldi - hisobotlarni konsolidatsiyalashgan tayyorlash, biznesni kompleks tahlil qilish va to'liq axborot rasmiga asoslangan maqbul boshqaruv qarorlari uchun mavzuga asoslangan ma'lumotlar bazalari

DWH ning yuqoridagi ta'rifi ushbu saqlash vositasining aloqadorligini ko'rsatadi. Biroq, siz QCD-ni shunchaki bir-biriga bog'langan ko'plab jadvallarga ega bo'lgan katta ma'lumotlar bazasi deb o'ylamasligingiz kerak. An'anaviy SQL-DBMS-lardan farqli o'laroq, ma'lumotlar ombori LSA - Layered Scalable Architecture deb nomlangan murakkab qatlamli (qatlamli) arxitekturaga ega. Aslida, LSA ma'lumotlar tuzilmalarining mantiqiy bo'linishini bir nechta funktsional darajalarga amalga oshiradi. Ma'lumotlar bir darajadan ikkinchisiga ko'chiriladi va bir vaqtning o'zida o'zgartirilib, natijada tahlil uchun mos bo'lgan izchil ma'lumot shaklida paydo bo'ladi [2] .

Klassik ravishda LSA quyidagi darajalarda amalga oshiriladi [3] :


  • birlamchi ma'lumotlarning operatsion qatlami (Birlamchi ma'lumotlar qatlami yoki staging), bu erda ma'lumotlar asl sifatida manba tizimlaridan yuklanadi va o'zgarishlarning to'liq tarixi saqlanadi. Saqlashning keyingi qatlamlari ma'lumotlar manbalarining fizik tuzilishidan, ular qanday to'planishidan va o'zgarishlarni qanday aniqlanishidan kelib chiqadi.


  • Yadro Ma'lumotlar Qatlami - bu turli xil manbalardagi ma'lumotlarni birlashtiradigan, ularni bir xil tuzilmalar va kalitlarga etkazadigan markaziy komponent. Bu erda iste'molchilarni ma'lumot manbalarining mantiqiy tuzilishi xususiyatlaridan va ularni o'zaro taqqoslash zaruriyatidan mavhumlashtirish uchun ma'lumotlar sifati va umumiy transformatsiyalar bilan asosiy ish olib boriladi . Bu ma'lumotlar yaxlitligi va sifatini ta'minlash masalasini hal qiladi.


  • analitik vitrinalar (Data Mart Layer) , bu erda ma'lumotlar tahlil qilish va BI boshqaruv panellarida yoki boshqa iste'molchilar tizimlarida foydalanish uchun qulay bo'lgan tuzilmalarga aylantiriladi. Ma'lumotlar martlari yadrodan ma'lumotlarni olganda, ular muntazam deb nomlanadi. Agar mahalliy muammolarni tezda hal qilish uchun ma'lumotlarni birlashtirish kerak bo'lmasa, mart operatsion qatlamdan asosiy ma'lumotlarni olishi mumkin va shunga mos ravishda operatsion qatlam deb ataladi. Murakkab hisob-kitoblar va atipik o'zgarishlarning natijalarini taqdim etish uchun ishlatiladigan ikkinchi darajali vitrinalar ham mavjud. Shunday qilib, do'kon peshtaxtalari muayyan biznes xususiyatlari uchun yagona ma'lumotlarning turli xil ko'rinishini taqdim etadi.


  • Va nihoyat, xizmat qatlami yuqoridagi barcha qatlamlar ustidan nazoratni ta'minlaydi. U biznes ma'lumotlarini o'z ichiga olmaydi, lekin ma'lumotlar sifati bilan ishlash uchun metama'lumotlar va boshqa tuzilmalar bilan ishlaydi, bu ma'lumotlar uchidan uchigacha auditorlik tekshiruvini (ma'lumotlar liniyasi ) amalga oshirishga , o'zgarishlarning deltasini ta'kidlash va yuklashlarni boshqarish uchun umumiy yondashuvlardan foydalanishga imkon beradi. Shuningdek, u xatolarni kuzatish va diagnostika qilish vositalarini taqdim etadi, bu esa muammolarni hal qilishni tezlashtiradi.




Barcha qatlamlar, xizmat ko'rsatish qatlamidan tashqari, doimiy ma'lumotlarni saqlash maydoni va yuklash va o'zgartirish modulidan iborat. Saqlash joylarida ma'lumotlarni o'zgartirish uchun texnik (bufer) jadvallar va iste'molchi kiradigan maqsadli jadvallar mavjud. ETL jarayonlarini yuklash va tekshirilishini qo'llab-quvvatlash uchun maqsadli jadvallar, yadrolar va do'kon peshtaxtalaridagi ma'lumotlar texnik maydonlar (meta-atributlar) bilan belgilanadi [3] . Shuningdek, ular turli xil ob'ektlardan ma'lumotlarni virtual saqlash (saqlashsiz) birlashtirish uchun virtual ma'lumotlar provayderlari qatlamini va maxsus hisobotlarni ajratadilar. Har bir qatlam turli xil saqlash va ma'lumotlarni o'zgartirish texnologiyalari yoki universal mahsulotlar, masalan, SAP NetWeaver Business Warehouse (SAP BW) yordamida amalga oshirilishi mumkin.

Big Data- ning paydo bo'lishi bilan 2010- yillarda e'tibor DWH ko'llarining an'anaviy ma'lumotlaridan ( Data Leyk ) o'tib ketdi. Biroq, quyidagi sabablarga ko'ra ma'lumotlar ko'lini yangi avlod QCD deb hisoblash to'g'ri emas

  • turli xil maqsadlar - DWH menejerlar, tahlilchilar va boshqa oxirgi biznes foydalanuvchilari tomonidan, ma'lumotlar ko'lidan asosan Data Scientists foydalanadi. Eslatib o'tamiz, Data Leyk tuzilmasiz, deb nomlangan do'konlarni saqlaydi. xom ma'lumotlar: dronlar va kuzatuv kameralaridan olingan videoyozuvlar, transport telemetriyasi, grafik tasvirlar, foydalanuvchi xatti-harakatlari jurnallari, saytlar va axborot tizimlari ko'rsatkichlari, shuningdek, turli xil saqlash formatlariga ega bo'lgan boshqa ma'lumotlar (taqdim etish sxemalari). Ular hali BI tizimidagi kundalik tahlil uchun mos emas, ammo ular Data Scientists tomonidan mashinalarni o'rganish algoritmlaridan foydalangan holda yangi biznes gipotezalarini tezda ishlab chiqish uchun ishlatilishi mumkin [5] ;


  • dizaynga turli xil yondashuvlar . DWH dizayni ma'lumotlar bilan ishlashning mantiqiy mantig'iga asoslangan - normallashtirilgan omborlar uchun uchinchi normal shakl, o'lchamlari bo'lgan omborxonalar uchun yulduz yoki qor parchasi sxemasi [1] . Ma'lumotlar ko'lini loyihalashda Big Data arxitektori va Data Engineer turli xil formatdagi manbalar va qabul qiluvchilarning xilma-xilligini hisobga olgan holda ETL jarayonlariga ko'proq e'tibor berishadi. Va uni to'g'ridan-to'g'ri saqlash masalasi juda sodda tarzda hal qilindi - sizga faqat ölçeklenebilir, xatolarga chidamli va nisbatan arzon fayl tizimi kerak, masalan, HDFS yoki Amazon S3 [5] ;


  • nihoyat, narx - odatda Data Lake , Apache Hadoop bilan byudjet serverlari asosida, qimmat litsenziyalar va kuchli uskunalarsiz, SAP, Oracle, Teradata va boshqalar kabi Data Warehouse sinfining ixtisoslashgan platformalarini loyihalashtirish va sotib olishning katta xarajatlaridan farqli o'laroq quriladi .


Shunday qilib, ma'lumotlar koli QCDdan sezilarli darajada farq qiladi. Biroq, Data Leykni qurishda me'moriy LSA yondashuvidan foydalanish mumkin . Masalan, Tinkoff-Bankdagi ma'lumotlar ko'lining asosi sifatida aynan shunday qatlamli inshoot olindi [6] :


  • RAW darajasida xom ma'lumotlar har xil formatlarda (tsv, csv, xml, syslog, json va boshqalar) saqlanadi;


  • operatsion darajada (ODD, Operatsion Data Definition), xom ma'lumotlar taxminiy relyatsion formatga aylantiriladi;


  • tafsilotlar darajasida (DDS, batafsil ma'lumotlar do'koni) batafsil ma'lumotlarning birlashtirilgan modeli to'planadi;


  • Va nihoyat, MART qatlami ishbilarmon foydalanuvchilar va mashinalarni o'rganish modellari uchun dastur ma'lumotlari marshruti bo'lib xizmat qiladi.


Ushbu misolda tuzilgan katta ma'lumotlar so'rovlari uchun SQL-on- Hadoop sinfidagi mashhur vosita Apache Hive ishlatiladi . Fayllarni saqlashning o'zi Hadoop klasterida Cloudera (CDH) kompaniyasining tijorat tarqatish asosida tashkil etilgan . An'anaviy bank DWH xissa parallel DBMS ustida amalga oshirilmoqda Greenplum [6] . O'z ustida, biz bu qo'shishingiz Cloudera Impala harakat mumkin Apache muqobil sifatida Xiva kabi, Greenplum , Arenadata JB va Teradata, bir xissa parallel me'morchiligi asoslangan. Biroq, uyani tanlash yuqori nosozliklarga bardoshlik va yuqori ish unumdorligi zarur bo'lsa, oqlanadi. Biz bu erda Apache Hive va Cloudera Impala o'rtasidagi o'xshashlik va farqlar haqida ko'proq gaplashdik . Tinkoff Bank ishiga qaytsak, BI vositalari ko'l va klassik DWH ma'lumotlarini o'qiydi, odatda OLAP hisobotlarini Big Data omboridagi ma'lumotlar bilan boyitadi . Bu qiziqishlarni tahlil qilish, xatti-harakatlarni bashorat qilish va bank veb-saytiga tashrif buyuruvchilar orasida paydo bo'ladigan hozirgi va kelajakdagi ehtiyojlarni aniqlash uchun ishlatiladi.

Ko'pchiligingiz bilasizki, inventarizatsiya tizimi uchun 3NF tomonidan yaratilgan ma'lumotlar bazasida ko'pchilik bir-biriga bog'liq jadvallar mavjud. Masalan, joriy inventarizatsiya ma'lumotlari to'g'risidagi hisobot 12 dan ortiq qo'shilgan shartlarni o'z ichiga olishi mumkin. Bu so'rov va hisobotning javob vaqtini tezda sekinlashtirishi mumkin. Ma'lumotlar ombori javob berish vaqtini qisqartirishga yordam beradigan va hisobotlar va tahlillar uchun so'rovlarning ishlashini yaxshilashga yordam beradigan yangi dizaynni taqdim etadi.
Data warehouse tizimi quyidagi nom bilan ham tanilgan:

  • Decision Support System (DSS) (Qarorlarni qo'llab-quvvatlash tizimi (DSS)


  • Executive Information System (Ijroiya axborot tizimi)


  • Management Information System (Boshqaruv axborot tizimi)


  • Business Intelligence Solution (Business Intelligence Qarori)


  • Analytic Application (Analitik dastur)


  • Data Warehouse (Ma'lumotlar ombori)




Datawarehouse tarixi

Ma'lumotlar ombori foydalanuvchilarga o'z tashkilotlari faoliyatini tushunish va yaxshilash uchun foyda keltiradi. Ma'lumotlarni saqlash zarurati kompyuter tizimlari murakkablashib borishi va ortib boruvchi Axborot hajmini boshqarish uchun zarur bo'lganligi sababli paydo bo'ldi. Biroq, ma'lumotni saqlash yangi narsa emas.

Data Warehouse rivojlanishidagi ba'zi muhim voqealar


  • 1960 yil - Dartmut va General Mills qo'shma tadqiqot loyihasida o'lchovlar va faktlar atamalarini ishlab chiqdilar.


  • 1970 yil - Nilsen va IRI chakana savdosi uchun o'lchovli ma'lumotlar marshrutlarini taqdim etdi.


  • 1983 yil - Tera Data Corporation qarorlarni qo'llab-quvvatlash uchun maxsus ishlab chiqilgan ma'lumotlar bazasini boshqarish tizimini joriy qildi


  • Ma'lumotlarni saqlash 1980 yillarning oxirida IBM ishchisi Pol Merfi va Barri Devlin Business Data Warehouse-ni ishlab chiqqandan so'ng boshlandi.


  • Biroq, haqiqiy kontseptsiya Inmon Bill tomonidan berilgan. U ma'lumotlar omborining otasi sifatida qaraldi. U omborni qurish, ishlatish va unga xizmat ko'rsatish uchun turli xil mavzularda va korporativ ma'lumot fabrikasida yozgan.


Datawarehouse qanday ishlaydi?

Ma'lumotlar ombori ma'lumotlar bir yoki bir nechta ma'lumot manbalaridan kelib chiqadigan markaziy ombor sifatida ishlaydi. Ma'lumotlar tranzaksiya tizimidan va boshqa relyatsion ma'lumotlar bazalaridan ma'lumotlar omboriga oqadi.

Ma'lumotlar quyidagicha bo'lishi mumkin:


  1. Tuzilgan


  2. Yarim tuzilgan


  3. Tuzilmagan ma'lumotlar


Ma'lumotlar qayta ishlanadi, o'zgartiriladi va qabul qilinadi, shunda foydalanuvchilar ma'lumotlar zahirasida qayta ishlangan ma'lumotlarga Business Intelligence vositalari, SQL mijozlari va elektron jadvallari orqali kirishlari mumkin. Ma'lumotlar ombori turli xil manbalardan keladigan ma'lumotlarni bitta keng ma'lumotlar bazasiga birlashtiradi.

Ushbu ma'lumotlarning barchasini bir joyga birlashtirib, tashkilot o'z mijozlarini yanada yaxlit tahlil qilishi mumkin. Bu mavjud bo'lgan barcha ma'lumotlarni ko'rib chiqqanligini ta'minlashga yordam beradi. Ma'lumotlarni saqlash ma'lumotlar qazib olish imkoniyatini yaratadi. Ma'lumotlarni qazib olish ma'lumotlarning yuqori savdosi va daromadiga olib kelishi mumkin bo'lgan naqshlarni qidirmoqda.

Data Warehousening turlari

Data Warehousening uchta asosiy turi:

1. Enterprise Data Warehouse (EDW):

Enterprise Data Warehouse (EDW) - bu markazlashtirilgan ombor. U korxona bo'ylab qarorlarni qo'llab-quvvatlash xizmatini taqdim etadi. Bu ma'lumotlarni tartibga solish va namoyish qilish uchun yagona yondashuvni taklif etadi. Shuningdek, u ma'lumotni mavzuga qarab tasniflash va ushbu bo'limlarga muvofiq kirish imkoniyatini beradi.

2. Operatsion ma'lumotlar do'koni:

Operatsion ma'lumotlar do'koni, shuningdek, ODS deb ham ataladi, ma'lumotlar ombori va OLTP tizimlari talab qilinadigan hisobot tashkilotlarini qo'llab-quvvatlamaganda, ma'lumotlar omboridan boshqa narsa emas. ODS-da ma'lumotlar ombori real vaqtda yangilanadi. Shunday qilib, Xodimlarning yozuvlarini saqlash kabi odatiy mashg'ulotlar uchun keng ma'qul.

3. Data Mart:

Data mart - bu ma'lumotlar omborining bir qismidir. Bu savdo, moliya, sotish yoki moliya kabi ma'lum bir biznes yo'nalishi uchun maxsus ishlab chiqilgan. Mustaqil ma'lumotlar martida ma'lumotlar to'g'ridan-to'g'ri manbalardan to'planishi mumkin.

Data Warehouse umumiy bosqichlari

Ilgari tashkilotlar ma'lumotlar omboridan nisbatan oddiy foydalanishni boshladilar. Biroq, vaqt o'tishi bilan ma'lumotlar omboridan yanada murakkab foydalanish boshlandi.

Quyida ma'lumotlar omboridan (DWH) foydalanishning umumiy bosqichlari keltirilgan:

Oflayn operatsion ma'lumotlar bazasi:

Ushbu bosqichda ma'lumotlar faqat operatsion tizimdan boshqa serverga ko'chiriladi. Shu tarzda, ko'chirilgan ma'lumotlarni yuklash, qayta ishlash va hisobot berish operatsion tizim ishiga ta'sir qilmaydi.

Oflayn Data Warehouse:

Ma'lumotlar omboridagi ma'lumotlar Operatsion ma'lumotlar bazasidan muntazam ravishda yangilanadi. Datawarehouse-dagi ma'lumotlar xaritada tuzilgan va Datawarehouse maqsadlariga muvofiq ravishda o'zgartirilgan.

Haqiqiy vaqtda Data Warehouse:

Ushbu bosqichda ma'lumotlar bazalari operatsion ma'lumotlar bazasida har qanday operatsiya sodir bo'lganda yangilanadi. Masalan, aviakompaniya yoki temir yo'llarni bron qilish tizimi.

Integratsiyalashgan Data Warehouse:

Ushbu bosqichda operatsion tizim operatsiyani amalga oshirganda ma'lumotlar omborlari doimiy ravishda yangilanadi. So'ngra ma'lumotlar ombori operatsion tizimga o'tkaziladigan operatsiyalarni ishlab chiqaradi.

Data Warehouse tarkibiy qismlari

Data Warehouse ning to'rtta tarkibiy qismi:

Yuk menejeri: Yuk menejeri oldingi komponent deb ham ataladi. U ma'lumotlarni qazib olish va omborga yuklash bilan bog'liq barcha operatsiyalarni bajaradi. Ushbu operatsiyalarga ma'lumotlar omboriga kirish uchun ma'lumotlarni tayyorlash uchun transformatsiyalar kiradi.

Warehouse menejeri: ombor menejeri ombordagi ma'lumotlarni boshqarish bilan bog'liq operatsiyalarni bajaradi. U izchillikni ta'minlash, indekslar va ko'rinishlarni yaratish, denormalizatsiya va agregatsiyalarni yaratish, manba ma'lumotlarini o'zgartirish va birlashtirish, arxivlash va pishirish ma'lumotlarini tahlil qilish kabi operatsiyalarni bajaradi.

So'rovlar menejeri: So'rovlar menejeri backend komponenti sifatida ham tanilgan. U foydalanuvchi so'rovlarini boshqarish bilan bog'liq barcha operatsion operatsiyalarni bajaradi. Ushbu ma'lumotlar ombori tarkibiy qismlarining operatsiyalari so'rovlarni bajarilishini rejalashtirish uchun tegishli jadvallarga to'g'ridan-to'g'ri so'rovlardir.

Qadam

Vazifalar

Yetkazib beriladigan narsalar


1

Loyiha doirasini aniqlash kerak

Qo'llanish doirasi ta'rifi


2018-04-02 121 2


Biznes ehtiyojlarini aniqlash kerak


Mantiqiy ma'lumotlar modeli


3

Operatsion ma'lumotlar bazasi talablarini aniqlang

Operatsion ma'lumotlar do'koni modeli


4

Ekstraksiya vositalarini sotib oling yoki ishlab chiqing

Asboblar va dasturiy ta'minotni chiqarib oling


5

Ma'lumotlar ombori ma'lumotlariga talablarni aniqlang

O'tish ma'lumotlari modeli


6

Document missing data

Loyihalar ro'yxati


7

Ma'lumotlar omboriga operatsion ma'lumotlar do'konini xaritalar

Ma'lumotlarni integratsiyalashgan xaritasi


8

Ma'lumotlar ombori ma'lumotlar bazasi dizaynini ishlab chiqish

Ma'lumotlar bazasini loyihalash


9

Operatsion ma'lumotlar do'konidan ma'lumotlarni chiqarib oling

Integral D / W ma'lumotlar ekstraktlari


10

Ma'lumotlar omborini yuklang

Dastlabki ma'lumotlar yuki


11

Ma'lumotlar omborini saqlash

Doimiy ma'lumotlarga kirish va undan keyingi yuklamalar


Data Warehouse amalga oshirish bosqichlari

Data Warehouseni amalga oshirish bilan bog'liq bo'lgan biznes xavfini hal qilishning eng yaxshi usuli quyida keltirilgan uch yo'nalishli strategiyani qo'llashdir

  1. Korxona strategiyasi : Bu erda biz texnik, shu jumladan, hozirgi me'morchilik va vositalarni aniqlaymiz. Shuningdek, biz faktlar, o'lchamlar va atributlarni aniqlaymiz. Ma'lumotlarni xaritalash va o'zgartirish ham o'tkaziladi.


  2. Bosqichli etkazib berish : Ma'lumotlar omborini amalga oshirish mavzu yo'nalishlari asosida bosqichma-bosqich amalga oshirilishi kerak. Bronlash va hisob-kitob qilish kabi tegishli biznes sub'ektlari dastlab amalga oshirilishi va keyin bir-biri bilan birlashtirilishi kerak.


  3. Iterativ prototiplash : amalga oshirishda katta portlash yondashuvidan ko'ra, ma'lumotlar omborini ishlab chiqish va takroriy ravishda sinab ko'rish kerak.


Datawarehouse-ni amalga oshirishdagi muhim qadamlar va uning natijalari.

Data Warehouseni amalga oshirish bo'yicha eng yaxshi amaliyot

  • Ma'lumotlarning izchilligi, aniqligi va yaxlitligini sinash uchun reja tuzing.


  • Data Warehouse yaxshi birlashtirilgan, aniq belgilangan va vaqt bilan muhrlangan bo'lishi kerak.


  • Ma'lumotlar omborini loyihalashda to'g'ri vositadan foydalanganingizga, hayot tsikliga rioya qilganingizga, ma'lumotlar ziddiyatlari haqida qayg'urganingizga ishonch hosil qiling va xatolaringizni bilib olishga tayyor bo'ling.


  • Operatsion tizimlar va hisobotlarni hech qachon almashtirmang


  • Ma'lumotlarni yig'ish, tozalash va yuklashga ko'p vaqt sarflamang.


  • Ma'lumotlar omborini amalga oshirish jarayonida barcha manfaatdor tomonlarni, shu jumladan biznes xodimlarini jalb qilishni ta'minlang. Ma'lumotlar ombori qo'shma / jamoaviy loyiha ekanligini aniqlang. Oxirgi foydalanuvchilar uchun foydali bo'lmagan ma'lumotlar omborini yaratishni xohlamaysiz.


  • Oxirgi foydalanuvchilar uchun o'quv rejasini tayyorlang.


Data Warehouse nima uchun kerak? Afzalliklari va kamchiliklari

Data Warehouse afzalliklari (DWH):

  • Data Warehouse ishbilarmon foydalanuvchilarga ba'zi manbalardan olingan muhim ma'lumotlarni bir joyda tezda olish imkoniyatini beradi.


  • Data Warehouse ishbilarmon foydalanuvchilarga ba'zi manbalardan olingan muhim ma'lumotlarni bir joyda tezda olish imkoniyatini beradi.


  • Data Warehouse turli xil o'zaro faoliyat funktsiyalar bo'yicha doimiy ma'lumotlarni taqdim etadi. Shuningdek, u vaqtinchalik hisobot va so'rovlarni qo'llab-quvvatlaydi.


  • Data Warehouse ishlab chiqarish tizimidagi stressni kamaytirish uchun ko'plab ma'lumot manbalarini birlashtirishga yordam beradi.


  • Ma'lumotlar ombori tahlil qilish va hisobot berish uchun umumiy aylanish vaqtini qisqartirishga yordam beradi.


  • Qayta qurish va integratsiya foydalanuvchiga hisobot va tahlil uchun foydalanishni osonlashtiradi.


  • Ma'lumotlar ombori foydalanuvchilarga bitta joyda manbalar sonidan muhim ma'lumotlarga kirish imkoniyatini beradi. Shuning uchun, bu foydalanuvchining bir nechta manbalardan ma'lumotlarni olish vaqtini tejaydi.


  • Ma'lumotlar ombori ko'plab tarixiy ma'lumotlarni saqlaydi. Bu foydalanuvchilarga kelajakda bashorat qilish uchun turli xil davrlar va tendentsiyalarni tahlil qilishga yordam beradi.


Data Warehousening kamchiliklari:


  • Tuzilmasiz ma'lumotlar uchun ideal variant emas.


  • Ma'lumotlar omborini yaratish va amalga oshirish vaqtni chalkashtirib yuboradigan ish.


  • Ma'lumotlar ombori nisbatan tez eskirishi mumkin


  • Ma'lumot turlari va diapazonlari, ma'lumotlar manbalari sxemasi, indekslar va so'rovlarga o'zgartirish kiritish qiyin.


  • Ma'lumotlar ombori oson ko'rinishi mumkin, ammo aslida oddiy foydalanuvchilar uchun bu juda murakkab.


  • Loyihani boshqarish bo'yicha barcha sa'y-harakatlarga qaramay, ma'lumotlar omborini saqlash loyihasi hajmi doimo oshib boradi.


  • Qachondir ombor foydalanuvchilari turli xil biznes qoidalarini ishlab chiqishadi.


  • Tashkilotlar o'zlarining ko'plab mablag'larini o'qitish va amalga oshirish maqsadida sarflashlari kerak.


Ma'lumotlarni saqlashning kelajagi


  • Normativ cheklovlarning o'zgarishi turli xil ma'lumotlar manbasini birlashtirish imkoniyatini cheklashi mumkin. Ushbu xilma-xil manbalarga saqlash uchun qiyin bo'lgan tuzilmaviy ma'lumotlar kirishi mumkin.


  • As hajmi bazalarni o'sadi, juda katta ma'lumotlar bazasini tashkil nima bashorat o'sishi davom etmoqda. Har doim kattalashib boradigan ma'lumotlar omborlari tizimlarini qurish va ishlatish juda murakkab. Bugungi kunda mavjud bo'lgan apparat va dasturiy ta'minot ko'p miqdordagi ma'lumotlarni Internetda saqlashga imkon bermaydi.


  • Multimedia ma'lumotlarini matnli ma'lumotlar sifatida boshqarish oson emas, matnli ma'lumotni esa bugungi kunda mavjud bo'lgan relyatsion dastur yordamida olish mumkin. Bu tadqiqot mavzusi bo'lishi mumkin.


Data Warehouse ivositalari

Bozorda ko'plab ma'lumotlar omborlari vositalari mavjud. Mana, eng taniqli biri:

1. MarkLogic:

MarkLogic ma'lumotlar omborini saqlashning foydali echimi bo'lib, u bir qator korporativ funktsiyalar yordamida ma'lumotlarni birlashtirishni osonlashtiradi va tezlashtiradi. Ushbu vosita juda murakkab qidiruv operatsiyalarini bajarishga yordam beradi. U hujjatlar, munosabatlar va metama'lumotlar kabi har xil turdagi ma'lumotlarni so'rashi mumkin.

https://developer.marklogic.com/products/

2. Oracle:

Oracle - bu sanoatning etakchi ma'lumotlar bazasi. Bu bino ichida ham, bulutda ham ma'lumotlar ombori echimlarini tanlashning keng doirasini taklif etadi. Bu operatsion samaradorlikni oshirish orqali mijozlar tajribasini optimallashtirishga yordam beradi.

https://www.oracle.com/index.html

3. Amazon RedShift:

Amazon Redshift - bu ma'lumotlar ombori vositasi. Bu standart SQL va mavjud bo'lgan BI vositalari yordamida barcha turdagi ma'lumotlarni tahlil qilish uchun oddiy va tejamli vosita. Shuningdek, so'rovlarni optimallashtirish texnikasidan foydalangan holda petabaytli tuzilgan ma'lumotlarga qarshi murakkab so'rovlarni o'tkazishga imkon beradi.

https://aws.amazon.com/redshift/?nc2=h_m1

Bu erda foydali ma'lumotlar bazasi vositalarining to'liq ro'yxati keltirilgan .

Asosiy ma'lumot


  • Ma'lumotlar ombori (DWH), shuningdek, Enterprise Data Warehouse (EDW) sifatida tanilgan.


  • Ma'lumotlar ombori ma'lumotlar bir yoki bir nechta ma'lumot manbalaridan kelib chiqadigan markaziy ombor sifatida tavsiflanadi.


  • Ma'lumotlar omborlarining uchta asosiy turi bu Enterprise Data Warehouse (EDW), Operatsion Data Store va Data Mart.


  • Ma'lumotlar omborining umumiy holati: Oflayn operatsion ma'lumotlar bazasi, Oflayn ma'lumotlar ombori, Haqiqiy vaqtda ma'lumotlar ombori va Integratsiyalashgan ma'lumotlar ombori.


  • Datawarehouse-ning to'rtta asosiy komponentlari yuk menejeri, ombor menejeri, so'rovlar menejeri, oxirgi foydalanuvchiga kirish vositalari


  • Ma'lumotlar ombori aviakompaniya, bank, sog'liqni saqlash, sug'urta, chakana savdo va boshqalar kabi turli sohalarda qo'llaniladi.


  • Datawarehosue dasturini amalga oshirish - bu uchta asosiy strategiya. Korxona strategiyasi, bosqichma-bosqich etkazib berish va takroriy prototip yaratish.


  • Ma'lumotlar ombori ishbilarmon foydalanuvchilarga ba'zi manbalardan olingan muhim ma'lumotlarni bir joyda tezda olish imkoniyatini beradi.






Download 227.5 Kb.

Do'stlaringiz bilan baham:
  1   2




Ma'lumotlar bazasi mualliflik huquqi bilan himoyalangan ©fayllar.org 2024
ma'muriyatiga murojaat qiling