Modul nomi: Katta ma’lumotlar tahliliga kirish (kirish kursi) Kurs haqida

kichikroq, zamonaviyroq va moslashuvchan ma'lumotlar to'plamini so'rang .


Natijada, so'rov vaqtlari ma'lumotlar bozori, ma'lumotlar ombori yoki relyatsion ma'lumotlar bazasi ^{109 kabi ishlash uchun qisqartirilishi mumkin} .


Yuqoridagi xususiyatlar ma'lumotlar ko'lini korporativ omborlardan ajratib turadi. Shu bilan birga, LSA arxitektura yondashuvidan ma'lumotlar ko'lini qurishda ham foydalanish mumkin.

106. 
     Korporativ ma'lumotlarni qayerda saqlash kerak: Ma'lumotlar ombori bo'yicha qisqacha ta'lim dasturi.
     
107. 
     Lotincha ibora “buning uchun maxsus”, “maxsus bayramda”; boshqa muammolarni hal qilish uchun moslashtirilmaydigan va umumiy yechim strategiyasiga to'g'ri kelmaydigan muayyan muammo yoki vazifani hal qilish usulini bildiradi, ba'zi istisnolarni tashkil qiladi.
     

106. 
     Springer E. Ma'lumotlar ko'llari nima va ularda saqlash nima uchun arzonroq
     

katta ma'lumotlar.

106. 
     Simon F. Farmoni. op.
     

71

Misol uchun:

• 
  RAW qatlami turli formatdagi xom ma'lumotlarni saqlaydi
  

( tsv , csv , xml , syslog , json va boshqalar);

• 
  operatsion darajada ( ODD , Operatsion Data Definition )
  

xom ma'lumotlar relyatsion formatga aylantiriladi;

• 
  tafsilot darajasida ( DDS , Detail Data Store ) batafsil ma'lumotlarning konsolidatsiyalangan modeli yig'iladi;
  

• 
  MART darajasi (data mart, slice Data Warehouse ) biznes foydalanuvchilari va mashinani oʻrganish modellari uchun amaliy maʼlumotlar marti vazifasini bajaradi ¹¹⁰ .
  

Ma'lumotlar ko'llari ma'lumotlarni to'playdigan har qanday biznesda ishlatilishi mumkin: marketing, chakana savdo, IT , ishlab chiqarish, logistika va boshqalar.


Ma'lumotlar ko'li sizga ma'lum bir biznes so'rovi uchun emas, balki "zaxirada" ma'lumotlarni to'plash imkonini beradi. Ma'lumotlar doimo "qo'l ostida" bo'lganligi sababli kompaniya har qanday gipotezani tezda sinab ko'rishi yoki ma'lumotlardan o'z maqsadlari uchun foydalanishi mumkin.
Masalan, “Internet of Things” ( IoT ) ishlab chiqarish korxonasida boshqaruv sensorlari tez-tez buziladigan murakkab uskunaga o‘rnatiladi, ulardan ma’lumotlarni filtrlashsiz ma’lumotlar ko‘liga yig‘ish mumkin. Etarlicha ma'lumot to'plangan bo'lsa, siz ularni tahlil qilishingiz va buzilishlarga nima sabab bo'lganini va ularni qanday qilib oldini olishni tushunishingiz mumkin.


Chakana savdo va elektron tijoratda ko'lda mijozlar haqida turli xil ma'lumotlarni saqlash mumkin: saytda o'tkazgan vaqt, ijtimoiy tarmoqlardagi guruhdagi faollik, menejerga qo'ng'iroq qilishda ovoz ohangi va xaridlarning muntazamligi. Keyinchalik bu ma'lumotlar global uchun ishlatilishi mumkin

• 
  keng miqyosli tahlil va mijozlar xatti-harakatlarini bashorat qilish. Shunday qilib, moslashuvchan ma'lumotlarni tahlil qilish uchun ma'lumotlar ko'llari kerak.
  

• 
  gipotezalarni qurish. Ular sizga imkon qadar ko'proq ma'lumot to'plash imkonini beradi, shunda keyinroq mashinani o'rganish vositalari va analitikadan foydalanib, siz turli faktlarni solishtirishingiz, aql bovar qilmaydigan bashoratlar qilishingiz, ma'lumotlarni turli tomonlardan tahlil qilishingiz va ma'lumotlardan tobora ko'proq qiymat olishingiz mumkin ¹¹¹ .
  

110. 
     Korporativ ma'lumotlarni qayerda saqlash kerak: Ma'lumotlar ombori bo'yicha qisqacha ta'lim dasturi.
     
111. 
     Springer E. Ma'lumotlar ko'llari nima va ularda saqlash nima uchun arzonroq
     

katta ma'lumotlar.

72

Tadqiqotlar shuni ko'rsatdiki, ma'lumotlar ko'lini joriy qilgan kompaniyalar daromad bo'yicha raqobatchilardan 9% oldinda. Shunday qilib, shuni aytishimiz mumkinki, ma'lumotlar ko'llari buning uchun o'z ma'lumotlarini tahlil qilishdan foydalangan holda ko'proq daromad olishni xohlaydigan kompaniyalarga kerak.


Etakchi kompaniyalar ko'lda saqlangan ma'lumotlarni tahlil qilish uchun ilg'or yondashuvlardan foydalanadilar, masalan, mashinani o'rganish. Ushbu yondashuv yordamida kompaniya boshqa tabiatdagi foydali tushunchalarni olishi, naqshlarni chiqarishi, kelajakdagi stsenariylarni bashorat qilishi mumkin.


Ma'lumotlar ko'llarining afzalliklari bilan bir qatorda, bitta asosiy muammo mavjud. Har qanday ma'lumotlar deyarli nazoratsiz ravishda u erga tushadi. Bu ularning sifatini aniqlash mumkin emasligini anglatadi. Agar kompaniyada aniq ma'lumotlar modeli bo'lmasa, ya'ni ma'lumotlar tuzilmalari turlari va ularni qayta ishlash usullari haqida tushuncha bo'lmasa, u holda ko'lni boshqarish yomon tashkil etilgan, u tezda juda ko'p miqdorda nazoratsiz ma'lumotlarni to'playdi, ko'pincha foydasiz. . Natijada, ko'l ma'lumotlar "botqog'i" ga aylanadi - foydasiz, kompaniya resurslarini o'zlashtiradi va hech qanday foyda keltirmaydi. Bunday holda, u butunlay o'chirilishi va ma'lumotlarni qayta yig'ishni boshlashi kerak.


Ma'lumotlar ko'lidan foydalanishdagi muammolar rasmda keltirilgan. 15.