Modul nomi: Katta ma’lumotlar tahliliga kirish (kirish kursi) Kurs haqida

ETL - birinchi navbatda ma'lumotlar manbalaridan ma'lumotlarni ajratib oling. Ma'lumotlar vaqtinchalik oraliq ma'lumotlar bazasida saqlanadi. Keyin ma'lumotlarni maqsadli ma'lumotlar ombori tizimi uchun mos shaklga aylantirish uchun transformatsiya operatsiyalari amalga oshiriladi. Keyin tuzilgan ma'lumotlar omborga yuklanadi va shundan so'ng u tahlilga tayyor bo'ladi;

• 
  ELT ( Extract, Load, Transform ) - ma'lumotlar manba ma'lumotlar hovuzlaridan chiqarilgandan so'ng darhol yuklanadi. Oraliq ma'lumotlar bazasi mavjud emas, ya'ni ma'lumotlar darhol yagona markazlashtirilgan omborga yuklanadi. Ma'lumotlar biznes razvedkasi va tahlil vositalaridan foydalanish uchun ma'lumotlar ombori tizimida o'zgartiriladi ⁸⁴ .
  

83. 
    Ma'lumotlarni saqlash arxitekturasi: an'anaviy va bulutli.
    
84. 
    Mana.
    

56

Tashkilot ma'lumotlar ombori quyidagi tuzilishga ega. Asosiy tuzilma oxirgi foydalanuvchilarga saqlash imkonini beradi
Hech kim to'g'ridan-to'g'ri manba tizimlaridan jamlangan ma'lumotlarga kira olmaydi, hisobotlarni yarata olmaydi va bu ma'lumotlarni tahlil qila olmaydi. Ushbu tuzilma ma'lumotlar manbalari bir xil turdagi ma'lumotlar bazasi tizimlaridan kelganda qo'llaniladi.
Bosqichli saqlash ko'plab turli xil ma'lumotlar turlari va formatlariga ega heterojen ma'lumotlar manbalariga ega bo'lgan tashkilotdagi keyingi mantiqiy qadamdir. Bosqich maydoni ma'lumotlarni tahlil va hisobot vositalaridan foydalangan holda so'rash osonroq bo'lgan umumiy tuzilgan formatga aylantiradi.


Oraliq tuzilmaning bir varianti ma'lumotlar omboriga ma'lumotlar martlarini qo'shishdir. Data marts ma'lum bir faoliyat sohasi uchun umumiy ma'lumotlarni saqlaydi va bu ma'lumotlarni tahlil qilishning aniq shakllari uchun tayyorlaydi.
Misol uchun, ma'lumotlar martlarini qo'shish moliyaviy tahlilchiga mijozlar xatti-harakatlarini bashorat qilish uchun savdo ma'lumotlari bo'yicha batafsil so'rovlarni bajarishni osonlashtirishi mumkin. Data marts ma'lumotlarni oxirgi foydalanuvchi ehtiyojlarini qondirish uchun maxsus moslashtirish orqali tahlilni osonlashtiradi.

• 
  So'nggi yillarda ma'lumotlarni saqlash bulutga o'tdi. Yangi bulutli omborlar an'anaviy arxitekturaga amal qilmaydi va ularning har biri o'ziga xos arxitekturani taklif qiladi
  

(masalan, Amazon Redshift, Google BigQuery ) ⁸⁵ .
Ma'lumotlarni saqlash tizimlarida ham farqlar mavjud .

3.