Big data tahlili

Nima uchun katta ma’lumotlar uchun taqsimlangan hisoblash kerak
Barcha muammolar taqsimlangan hisoblashni talab qilmaydi. Agar katta vaqt cheklovi mavjud boʻlmasa, murakkab ishlov berish masofadan turib maxsus xizmat orqali amalga oshirilishi mumkin. Kompaniyalar ma’lumotlarni kompleks tahlil qilishlari kerak boʻlganda, IT ma’lumotlarni qayta ishlash uchun koʻplab zaxira manbalari mavjud boʻlgan tashqi xizmatga yoki tashkilotga koʻchiradi. Bu kompaniyalar kerakli natijalarni olish uchun kutishni xohlamagan; paydo boʻlayotgan talablarni bajarish uchun yetarli miqdorda kompyuter resurslarini sotib olish iqtisodiy jihatdan maqsadga muvofiqmasdi. Koʻpgina hollarda, tashkilotlar xarajatlar sababli barcha ma’lumotlarni toʻplashga urinishdan koʻra, faqat ma’lumotlarning ayrimlarini yigʻib olishadi. Tahlilchilar barcha ma’lumotlarni olishni xohlashdi, ammo ular kerakli ma’lumotlarni kerakli vaqtda qoʻlga kiritishlariga umid qilib, tasvirlarni tartibga solib chiqishlari kerak edi.
Apparat va dasturiy ta’minotning asosiy yutuqlari ma’lumotlarni boshqarish sohasida tubdan oʻzgarishlarni amalga oshirdi. Birinchidan, yangilik va talab kuchni oshirdi va apparat narxini pasaytirdi. Ushbu tugunlarning ulkan klasterida yuklamalarni muvozanatlash va optimallashtirish kabi jarayonlarni avtomatlashtirish orqali ushbu apparatdan qanday foydalanishni tushunadigan yangi dasturiy ta’minot paydo boʻldi. Dasturga oʻrnatilgan qoidalar kiritilgan boʻlib, ular ma’lum ish yuklamalari ma’lum bir bajarish darajasini talab qiladi. Dastur barcha tugunlarni xuddi hisoblash, saqlash va tarmoq aktivlarining katta havzasi kabi muomala qildi va agar virtualizatsiya texnologiyasidan foydalangan holda, tugun ishlamay qolsa, jarayonlarni boshqa tugunga oʻtkazdi.
Hisoblashning oʻzgaruvchan iqtisodiyoti
Oldinga siljish va koʻp narsa oʻzgardi. Soʻnggi bir necha yil ichida hisoblash va saqlash resurslarini sotib olish narxi keskin tushib ketdi. Virtuallashtirish yordami bilan klasterga qoʻyilishi mumkin boʻlgan oddiy serverlar va ustun koʻrinishidagi tarmoqqa ulanishi mumkin boʻlgan bleyd serverlar hisoblash iqtisodiyotini oʻzgartirdi. Ushbu oʻzgarish ushbu tizimlarning boshqarilishini keskin yaxshilaydigan dasturiy ta’minotni avtomatlashtirish yechimlaridagi yangiliklarga toʻgʻri keldi. Taqsimlangan hisoblash va parallel ishlov berish usullaridan foydalanish qobiliyati koʻrinishini tubdan oʻzgartirib yubordi va kechikishni keskin kamaytirdi. Yuqori chastotali savdo (HFT) kabi maxsus holatlar mavjud boʻlib, unda kam kechikish faqat serverlarni fizik bitta joyda joylashtirish orqali amalga oshiriladi.