Ma’lumotlar kommunikatsiyasi” fanidan tayyorlagan mustaqil ishi topshirdi: Qabul qildi: O. I. Ergashev Farg‘ona 2023 reja

AXBOROT TEXNOLOGIYALARI VA KOMMUNIKATSIYALARNI


RIVOJLANTIRISH VAZIRLIGI


MUHAMMAD AL – XORAZMIY NOMIDAGI


TOSHKENT AXBOROT TEXNOLOGIYALARI UNIVERSITETI


FARG‘ONA FILIALI

“Kompyuter injiniring” fakulteti

______________________________________ yo‘nalishi

__________ – guruh talabasi

_____________________________________________ ning

“MA’LUMOTLAR KOMMUNIKATSIYASI”

fanidan tayyorlagan
MUSTAQIL ISHI

Topshirdi: _____________________________
Qabul qildi: O.I.Ergashev
Farg‘ona 2023
REJA:
1 Kirish………………………………………………………3
2 MapReduce siqilga ko’dlashni qo’llab quvatlaydi……...4
3 Siqish yo’llarini tanlash…………………………………..5
4 Siqish joyini tanlash………………………………………7
5 Siqish parametrining konfiguratsiyasi………………….7
6 Siqish amaliyoti holatlari…………………………………8
7 Xulosa……………………………………………………..18
8 Foydalanilgan adabiyotlar……………………………….19


1KIRISH.

Siqish texnologiyasi asosiy saqlash tizimining (HDF) o'qish baytlarini samarali ravishda kamaytirishi mumkin. Siqish tarmoq o'tkazuvchanligi va disk maydoni samaradorligini oshiradi. Mr dasturlarini ishga tushirishda, i / o operatsiyalari, tarmoq ma'lumotlarini uzatish, aralashtirish va birlashtirish uzoq vaqt talab etadi, ayniqsa ma'lumotlar ko'lami katta va ish yuki zich bo'lsa. Shuning uchun ma'lumotlarni siqishni ishlatish juda muhimdir. Kirish/chiqish drayveri va tarmoq o'tkazuvchanligi Hadoop-ning qimmatbaho manbalari ekanligini hisobga olsak, ma'lumotlarni siqish resurslarni tejash, disk kiritish-chiqarishni minimallashtirish va tarmoq uzatish uchun juda foydali. Siqishni MapReduce-ning istalgan bosqichida yoqish mumkin. Shunga qaramay, protsessorni siqish va dekompressiya operatsiyalari uchun qo'shimcha xarajatlar kam bo'lsa-da, uning samaradorligini oshirish va resurslarni tejash xarajatlarsiz emas.

Siqish Hadoop samaradorligini oshirish uchun optimallashtirish strategiyasidir.
Diskni kamaytirish va MR dasturlarining tezligini yaxshilash uchun Mapper va Reducer ishga tushirish jarayoni ma'lumotlarini siqish orqali.
Eslatma. Siqish texnologiyasi diskni kamaytiradi, lekin shu bilan birga protsessorning ishlash vaqtini oshiradi. Shuning uchun siqishni xususiyatlaridan foydalanish ish faoliyatini yaxshilashi mumkin, ammo noto'g'ri foydalanish ham ish faoliyatini pasaytirishi mumkin.
Siqishning asosiy printsipi:
((1) pullik ishlarni hisoblash, kamroq siqishni ishlating
(2) masofadan ishlash, siqish bilan ko'proq siqish.

2 MAPREDUCE SIQILGAN KO’DLASHNI QO’LLAB QUVATLAYDI