Big data tahlili

Gibrid jarayonga misol ko‘rib chiqish.
Tasavvur qiling, siz onlayn sayohat veb-saytidagi ma’lumotlarni boshqarish uchun javobgarsiz. Sizning kompaniyangiz havo xizmatlari, sayohatlar, mehmonxonalar, kurortlar va boshqalarni o‘z ichiga olgan keng ko‘lamli xizmatlarni taklif etadi. Kompaniya ushbu xizmatlarni turli yo‘llar bilan taklif qiladi. Masalan, har xil sayohatlar, mehmonxonalar va boshqalarni ko‘rib chiqish mumkin bo‘lgan ommaviy veb-sayt mavjud. Bu veb-sayohat sug‘urtasi va mahalliy sayohat xizmatlari kabi xizmatlarni taklif etuvchi turli kompaniyalar bilan aloqalarni saqlaydi. Turli mamlakatlar uchun maxsus saytlar mavjud. Bundan tashqari, korporativ sayohat xizmatlari yirik kompaniyalar uchun mo‘ljallangan. Aytishga hojat yo‘q, bu sayyohlik kompaniyasi katta miqdordagi ma’lumotlarni boshqarishi va u bilan kim muloqot qilayotganiga qarab boshqacha tarzda taqdim etishi kerak. Ma’lumotlar ombori kompaniya tomonidan operatsiyalar va operatsion ma’lumotlarni kuzatish uchun ishlatiladi. Biroq, ma’lumotlar ombori veb-trafikni kuzatmaydi. Shu sababli, kompaniya mijozlarning o‘zaro ta’sirini kuzatish uchun veb-tahlil yechimlaridan foydalangan.
Bu ma’lumotlarning ko‘pchiligi kelajakni rejalashtirganlar uchun nihoyatda qimmatli bo‘lishi mumkin bo‘lsa-da, kompaniya bu ma’lumotlarning hammasini yoki ko‘p qismini ma’lumotlar omborida saqlashi samlarali bo‘lmagan. Natijada, bu ma’lumotlarning aksariyati tekshirilgandan keyin tashlab yuborilgan. Tez orada kompaniya biznesdagi o‘zgarishlar va nyuanslarni tushunish uchun iloji boricha ko‘proq ma’lumot to‘plash foydali bo‘lishini tushundi.
Axborot menejmenti guruhi, bu ma’lumotlarni saqlash uchun maxsus ma’lumotlar omborini yaratish o‘rniga, standart serverlarga asoslangan Hadoop taqsimlangan hisoblash usulini qo‘llaydi, deb qaror qildi. Endi kompaniya veb-o‘zaro aloqalar haqidagi barcha ma’lumotlarni saqlashi mumkin. Bu ma’lumotlar hozirda Hadoop va MapReduce ishlaydigan ko‘p sonli serverlarda saqlanadi. Flume va Sqoop kabi uskunalardan foydalanib, jamoa ma’lumotlarni Hadoop-ga va undan ko‘chirishi va ularni o‘zaro munosabatlar modeliga kiritishi mumkin, shunda unga tanish SQL vositalari yordamida kirish mumkin.
Agar xaridor demografiyasi yangi xizmatlarni xohlasa, kompaniya o‘z biznes taklifini tezda o‘zgartirishi mumkin. Kompaniya, shuningdek, chiptalar narxining paketlar narxiga ta’sir qiladigan o‘zgarishlarini ham bashorat qilishi mumkin. Bu ma’lumotlarning bir qismi Hadoop doirasida qoladi va real vaqtda yangilanadi. Boshqa ma’lumotlar elementlari tozalanadi va keyin ma’lumotlar omboriga ko‘chiriladi, shunda ma’lumotlar tarixiy mijozlar va sheriklar haqidagi ma’lumotlarni yangi ma’lumotlar bilan solishtirish uchun ishlatilishi mumkin. Mavjud ombor biznes uchun kontekstni ta’minlaydi va Hadoop muhiti har daqiqada nima bo‘layotganini kuzatib boradi. Ma’lumotlar ombori bilan dinamik tizimning kombinatsiyasi kompaniyaga o‘z veb-muhitida yaratilgan katta hajmdagi ma’lumotlarni tahlil qilish asosida o‘z biznesini yanada rivojlantirish uchun katta imkoniyatlar beradi. 11.2-rasmda an’anaviy va katta ma’lumotlar omborlarini gibridlashtirishga yondashuvning misolini ko‘rsatadi.

11.2-Rasm. Katta ma’lumotlar omborlari va ma’lumotlar to‘plamlari uchun ma’lumotlar oqimi.