Big data tahlili

Xizmat sifatidagi ma’lumotlar
Bu katta ma’lumotlarga bag'ishlangan kitob boʻlgani uchun, biz sizga xizmat sifatidagi ma’lumotlar (DaaS) deb nomlangan boshqa yetkazib berish modelidan xabardor boʻlishingizni istaymiz. DaaS SaaS bilan chambarchas bogʻliq. DaaS - bu ma’lumotlaringizni saqlash va olish uchun bulutga ulanish imkonini beradigan platformadan mustaqil xizmat. Bundan tashqari, siz katta ma’lumotlar muhitida juda foydali boʻlgan bir qator ixtisoslashtirilgan ma’lumotlar xizmatlarini topasiz. Masalan, Google soʻrovni atigi 15 soniyada 5 terabaytli ma’lumot bilan ishlashga qodir xizmatni taklif qiladi. Ushbu turdagi soʻrov odatda odatdagi ma’lumotlar markazida oʻn baravar koʻproq vaqtni oladi. IBM va boshqalar shu kabi kompaniyalar tomonidan yuzlab maxsus tahlil xizmatlari ishlab chiqilgan.

Bulutni katta ma’lumotlar uchun zaruriyligi

Shubhasiz, bulutdagi katta ma’lumotlar uchun tarqatish va etkazib berish modellarining koʻplab kombinatsiyalari mavjud. Masalan, umumiy bulut IaaS yoki shaxsiy bulut IaaS bulutlaridan foydalanishingiz mumkin. Xoʻsh, bu katta ma’lumotlar uchun nimani anglatadi va nima uchun bulut bunga mos keladi? Katta ma’lumot uchun hisoblash kuchining taqsimlangan klasterlari kerak boʻladi, bu esa bulutni qanday qurilganini anglatadi.
Aslida, bulutning bir qator xususiyatlari uni katta ma’lumotlar ekotizimining muhim qismiga aylantiradi:

• 
  Miqyosi. Uskuna koʻlamini kengaytirish bir xil me’morchilikka ega boʻlgan hisoblash quvvatidan kichik hajmdan katta hajmgacha oʻtish qobiliyatini anglatadi. Dasturiy ta’minot tomondan, bu quvvat manbalari koʻpayishi bilan quvvat birligi uchun ishlashning barqarorligini anglatadi. Bulut katta hajmdagi ma’lumotlarni qamrab olishi mumkin. Bulut modelining ajralmas qismi boʻlgan taqsimlangan hisoblash haqiqatan ham boʻlinib, gʻolib chiqadi. Shuning uchun, agar sizda katta miqdordagi ma’lumotlar mavjud boʻlsa, ularni bulutli serverlarga boʻlish mumkin. IaaS ning muhim xususiyati uning dinamik ravishda masshtablash qobiliyatidir. Bu shuni anglatadiki, kutilganidan koʻproq manbalarga ehtiyoj sezsangiz, ularni olishingiz mumkin. Bu elastiklik tushunchasi bilan bogʻliq.
  
• 
  Elastiklik. Elastiklik - bu ehtiyojga qarab real vaqtda hisoblash resurslariga boʻlgan ehtiyojni oshirish yoki kamaytirish qobiliyati. Bulutning afzalliklaridan biri shundaki, mijozlar kerakli vaqtda xizmatning kerakli qismiga kerak boʻlganda kirish imkoniyatiga ega. Bu ma’lumotlar hajmi va tezligi bilan ishlash uchun zarur boʻlgan hisoblash manbalarini koʻpaytirishni talab qiladigan katta ma’lumotlar loyihalari uchun foydali boʻlishi mumkin. Albatta, bulutning aynan shu xususiyati foydalanuvchilar uchun foydali boʻlib, xizmat koʻrsatuvchi provayder ushbu turdagi xizmat uchun optimallashtirilgan platforma arxitekturasini ishlab chiqishi kerakligini anglatadi.
  
• 
  Resurslarni birlashtirish: Bulutli arxitektura umumiy resurslar guruhini samarali yaratishga imkon beradi va bulutni iqtisodiy jihatdan foydali qiladi.
  
• 
  Oʻz-oʻziga xizmat koʻrsatish: bulutli resurs foydalanuvchisi oʻz-oʻziga xizmat koʻrsatish bilan kerakli resurslarni olish uchun brauzer yoki portal interfeysidan foydalanishi mumkin, masalan, ulkan bashoratli modelni boshqarish uchun. Bu ma’lumotlar markazidan resurslarni qanday qilib olish mumkinligidan tubdan farq qiladi, bu yerda siz AT operatsiyalaridan manbalarni soʻrashingiz kerak.
  
• 
  Koʻpincha oldindan toʻlovlar pastligi: Agar siz bulutli provayderdan foydalansangiz, katta miqdordagi uskunalar sotib olmaganingiz yoki yangi katta ma’lumotlar maydonini ijaraga olmaganingiz uchun boshlangʻich xarajatlar kamayishi mumkin. Bulutli muhit bilan bogʻliq boʻlgan miqyosli iqtisoddan foydalangan holda, bulut foydali koʻrinishi mumkin. Albatta, siz ommaviy bulut, xususiy bulut yoki gibrid bulutga qiziqishingizni baholash uchun oʻzingizning hisob-kitobingizni qilishingiz kerak boʻladi. Biz ushbu bobning keyingi qismida “Bulutli xizmatlardan foydalanganda qayerda ehtiyot boʻlishingiz kerak” ligi keltirilgan.
  
• 
  Borganingizda toʻlang: bulutli provayder uchun odatiy hisob-kitob opsiyasi – “Borganingizda toʻlang” (PAYG), demak siz ishlatilgan resurslar uchun nusxa narxiga qarab toʻlanadi. Agar siz katta ma’lumot loyihasi uchun qanday manbalar kerakligini bilmasangiz (agar siz byudjetda boʻlmasangiz), bu foydali boʻlishi mumkin.
  
• 
  Chidamlilik: bulutli xizmat koʻrsatuvchi provayderlar bir yoki bir nechta tizim tarkibiy qismlarining ishdan chiqishiga qaramay uzluksiz xizmat koʻrsatish uchun oʻzlarining arxitekturalarida mustahkamlikka ega boʻlishi kerak.
  

Ba’zi hollarda, xizmat koʻrsatuvchi provayder mijozning ehtiyojlarini oldindan koʻra olmaydi. Shunday qilib, xizmat koʻrsatuvchi provayder odatda uchinchi tomon xizmat provayderining qoʻshimcha imkoniyatlarini qoʻshadi. Odatda, iste’molchi qoʻshimcha bulut provayderi bilan ish olib borayotganini bilmaydi.

Katta ma’lumot uchun bulutdan foydalanish

Shubhasiz, bulutning tabiati uni katta ma’lumotlar uchun ideal hisoblash muhitiga aylantiradi. Xoʻsh, bulut bilan katta ma’lumotlardan qanday foydalanish mumkin?
Mana ba’zi misollar:

• 
  IaaS umumiy bulutda. Ushbu stsenariyda siz oʻzingizning fizik infratuzilmangizdan foydalanishni xohlamasligingiz sababli katta ma’lumotlar xizmatlari uchun ommaviy bulut provayderi infratuzilmasidan foydalanasiz. IaaS virtual mashinalarni deyarli cheksiz saqlash va qayta ishlash quvvatlari bilan ta’minlashi mumkin. Siz oʻzingiz xohlagan operatsion tizimni tanlashingiz mumkin va atrof-muhitni sizning ehtiyojlaringizga mos ravishda dinamik ravishda masshtablash imkoniyatiga egasiz. Masalan, ushbu bobda batafsilroq ma’lumot berilgan Amazon Elastic Compute Cloud (Amazon EC2) yordamida ma’lumotlarning massiv holda parallel ravishda qayta ishlashini talab qiladigan real vaqtda prognozlash modeli. Bu katta chakana ma’lumotlarni qayta ishlaydigan xizmat boʻlishi mumkin. Siz xohlagan real vaqtda reklamalarni mijozlarga yoʻnaltirish uchun klikstream ma’lumotlarining milliardlab qismini qayta ishlashni xohlashingiz mumkin.
  
• 
  PaaS xususiy bulutda: PaaS - bu umumiy yoki xususiy bulut muhitida dasturlar va xizmatlarni loyihalash, amalga oshirish va tarqatish uchun ishlatilishi mumkin boʻlgan butun infratuzilma. PaaS, tashkilotga alohida apparat va dasturiy ta’minot elementlarini boshqarishdagi murakkabliklarga duch kelmasdan, asosiy vositachilik xizmatlaridan foydalanish imkoniyatini beradi. PaaS yetkazuvchilari oʻzlarining PaaS takliflariga Hadoop va MapReduce kabi katta ma’lumotlar texnologiyalarini qoʻshishni boshlaydilar. Masalan, siz tibbiy ma’lumotlarning katta hajmlarini tahlil qilish uchun maxsus dastur yaratishingiz mumkin. Ilova real vaqtda ham, real boʻlmagan vaqtda ham ma’lumotlardan foydalanadi. Saqlash va qayta ishlash uchun Hadoop va MapReduce kerak boʻladi. Ushbu stsenariyda PaaS-ning eng yaxshi tomoni, dasturni qanchalik tez tarqatish mumkinligidir. Ichki AT-guruhlarning yangi texnologiyalarni oʻzlashtirishi uchun kutishingiz shart emas va siz erkinroq tajriba qilishingiz mumkin. Ishonchli yechimni aniqlaganingizdan soʻng, uni AT mutaxassislari qoʻllab-quvvatlashga tayyor boʻlganda uni uyingizga olib kelishingiz mumkin.
  
• 
  Gibrid bulutdagi SaaS: Bu yerda siz mijozlarning ovozli ma’lumotlarini bir nechta kanallar boʻyicha tahlil qilishingiz mumkin. Koʻpgina kompaniyalar ma’lumotlarning muhim manbalaridan biri mijozlarning oʻz kompaniyalari, ularning mahsulotlari va xizmatlari haqida oʻylashlari va gapirishlari ekanligini aniqladilar. Mijozlarning ovozli ma’lumotlariga kirish huquqi va xatti-harakatlari toʻgʻrisida bebaho tushunchalarni berishi mumkin. Mijozlar tobora koʻproq Internetdagi “ochiq” ovoz berishmoqda. Ushbu ochiq ma’lumotni tahlilingizga kiritish orqali mijozlarning fikr-mulohazalari qiymatini sezilarli darajada oshirish mumkin. Sizning SaaS-provayderingiz tahlil qilish uchun platforma va ijtimoiy media ma’lumotlarini taqdim etadi. Shu bilan bir qatorda, oʻzingizning shaxsiy bulutingizda korporativ CRM ma’lumotlaringizdan tahlilga qo'shilish uchun foydalanishingiz mumkin.
  

Ba’zi sanoat insayderlari bulutda ishlaydigan va katta ma’lumotlardan foydalanadigan dasturlarni tavsiflash uchun “katta ma’lumotlar dasturlari” atamasidan foydalanadilar. Bunga Amazon.com va LinkedIn-ni misol qilish mumkin. Ba’zi odamlar, bu haqiqatan ham ma’lum bir biznes muammosini hal qiladigan SaaS dasturlari ekanligi haqida bahslashishi (va boʻlishi) mumkin. Bu koʻpincha rivojlanayotgan sohada semantikaga tegishli.

Bulutdagi katta ma’lumotlar bozoridagi provayderlar

Bulutli ilovalar har qanday shakl va oʻlchamda boʻlib, turli xil mahsulotlarni taklif qilishadi. Ulardan ba’zilari taniqli uy nomlari, boshqalari esa endi paydo boʻlmoqda. Katta ma’lumot uchun ishlatilishi mumkin boʻlgan IaaS xizmatlarini taklif qiluvchi ba’zi bulut provayderlari orasida Amazon.com, AT&T, GoGrid, Joyent, Rackspace, IBM va Verizon / Terremark mavjud.
Shu bilan birga, bulutli kompaniyalar va bulutli xizmat koʻrsatuvchi provayderlar katta ma’lumotlar uchun maxsus moʻljallangan dasturlarni ham taklif qilishadi. Bular keyingi boblarda tasvirlangan.