Apache Hadoop va Spark: Ma'lumotlarni tahlil qilish uchun kirish va foydalanish holatlari Abdullayev Jasurbek kontur

Bulutli va taqsimlangan hisoblash

• 
  Ikkinchi tendentsiya - bulutga asoslangan saqlash va hisoblash resurslarining keng tarqalishi
  
  • 
    Ushbu katta ma'lumotlar to'plamlarini qayta ishlash uchun
    
• 
  bulut xususiyatlari
  
  • 
    Kengaytiriladigan standart muhitni ta'minlang
    
  • 
    Talab bo'yicha hisoblash
    
  • 
    Sizga kerak bo'lganda to'lang
    
  • 
    Dinamik ravishda kengaytiriladigan
    
  • 
    Arzonroq
    

Ma'lumotlarni qayta ishlash va mashinani o'rganish usullari

• 
  Ma'lumotlarni qayta ishlash (uchinchi tendentsiya)
  
  • 
    An'anaviy ETL (chiqarish, o'zgartirish, yuklash)
    
  • 
    Ma'lumotlar do'konlari ( HBase , ……..)
    
  • 
    Oqimlarni qayta ishlash vositalari,
    

    multimedia va ommaviy ma'lumotlar

• 
  Mashinani o'rganish (to'rtinchi tendentsiya)
  
  • 
    tasnifi
    
  • 
    regressiya
    
  • 
    Klasterlash
    
  • 
    Birgalikda filtrlash
    

Katta ma'lumotlar to'plami

mashina
O'rganish
Tarqalgan hisoblash
Ushbu to'rtta tendentsiya chorrahasida ishlash juda hayajonli va qiyin va katta ma'lumotlarni saqlash va qayta ishlashning yangi usullarini talab qiladi.
Ma'lumotlarni qayta ishlash ETL (chiqarish, o'zgartirish, yuklash)

Hadoop ekotizim

• 
  Masshtablilikni yoqing
  
  • 
    tovar apparati bo'yicha
    
• 
  Xatolarga chidamlilik bilan ishlov berish
  
• 
  Har xil turdagi ma'lumotlar bilan ishlay oladi
  
  • 
    Matn, grafik, oqim ma'lumotlari, rasmlar,…
    
• 
  Umumiy muhit
  
• 
  Qiymat beradi
  
  • 
    xarajat
    

Hadoop ekotizim

A
B

C
D
qatlam diagrammasi