Apache Hadoop and Spark: Introduction and Use Cases for Data Analysis


Download 1.05 Mb.
bet11/11
Sana13.03.2023
Hajmi1.05 Mb.
#1265753
1   2   3   4   5   6   7   8   9   10   11
Bog'liq
PRESENTATION FOR HOOK JASUR

HPC va Big Data K-Means misoli


MPI, albatta , Hadoop- dan o'zib ketadi , lekin HPC va katta ma'lumotlarni, jumladan Spark va HARPni birlashtirgan boshqa texnologiyalarning gibrid yondashuvi yordamida kuchaytirilishi mumkin. Dr. Jefri Foks, Indiana universiteti. ( http://arxiv.org/pdf/1403.1528.pdf )

Xulosa

  • Hadoop (HDFS, MapReduce )
    • Katta ma'lumotlarni qayta ishlash uchun oson echimni taqdim etadi
    • Tarqalgan tizimni dasturlashda paradigma o'zgarishini keltirib chiqaradi
  • Uchqun
    • Xotirada hisoblash uchun MapReduce kengaytirilgan
    • oqimli, interaktiv, iterativ va mashinani o'rganish vazifalari uchun
  • Dunyoni o'zgartirish
    • Ma'lumotlarni qayta ishlashni arzonroq va samaraliroq va kengaytiriladigan qildi
    • Boshqa ko'plab vositalar va dasturlarning asosidir

Zaxira

MapReduce va boshqalar. Katta miqyosdagi ma'lumotlarni tahlil qilish uchun Spark

  • MapReduce va Spark keng miqyosli ma'lumotlarni tahlil qilish uchun ikkita mashhur ochiq manbali klasterli hisoblash tizimidir.
  • Ushbu ramkalar oddiy dasturlash API-ni foydalanuvchilarga ochib berish orqali vazifalar parallelligi va nosozliklarga chidamlilikning murakkabligini yashiradi.

Vazifalar

So'zlar soni

saralash

K- degani

Sahifa reytingi

MapReduce

Uchqun

Download 1.05 Mb.

Do'stlaringiz bilan baham:
1   2   3   4   5   6   7   8   9   10   11




Ma'lumotlar bazasi mualliflik huquqi bilan himoyalangan ©fayllar.org 2024
ma'muriyatiga murojaat qiling