Ma’lumotlar kommunikatsiyasi” fanidan tayyorlagan amaliy mashg‘ulot ishlari topshirdi: M. A. Akbarova Qabul qildi: O. I. Ergashev Farg‘ona 023 amaliy mashg‘ulot mavzu: Java-da MapReduce dasturi Ishning maqsadi: Displey funksiyasi

HDFS Federation
Nom tugunida fayl tizimining barcha fayllari va bloklariga havolalar xotirada saqlanadi; bu ko'p fayllarga ega bo'lgan juda katta klasterlarda xotira masshtablashning cheklovchi omiliga aylanishini bildiradi ( 398 -betdagi "Nom tuguniga qancha xotira kerak?"ga qarang ).
HDFS texnologiyasi 2.x relizlar seriyasida taqdim etilgan Federatsiya nom tugunlarini qo'shish orqali klasterni masshtablash imkoniyatini beradi , ularning har biri fayl tizimining nom maydonining bir qismini boshqaradi. Masalan, bitta nomli tugun / foydalanuvchi ierarxiyasidagi barcha fayllarni , ikkinchi nomli tugun esa / share almashish ierarxiyasidagi fayllarni boshqarishi mumkin .
Bo'sh joydagi barcha fayl bloklarini o'z ichiga olgan bloklar hovuzidan iborat nom maydoni hajmini boshqaradi . Nomlar maydoni jildlari bir-biridan mustaqil; bu nom tugunlari bir-biri bilan aloqa qilmasligini anglatadi va bitta nom tugunining ishlamay qolishi boshqa tugunlar tomonidan boshqariladigan nom maydonlarining mavjudligiga ta'sir qilmaydi. Biroq, bloklar hovuzi bo'linmaydi, shuning uchun ma'lumotlar tugunlari klasterdagi har bir nom tugunida ro'yxatdan o'tadi va turli xil hovuzlardagi bloklarni saqlaydi.
HDFS federatsiya klasteriga kirish uchun mijozlar tugunlarni nomlash -uchun fayl yo'llarini xaritalash uchun o'rnatish jadvallaridan foydalanadilar. Ushbu vazifa ViewFileSystem yordamida konfiguratsiya darajasida hal qilinadi va ViewFileSystem и URI viewfs://.
HDFS yuqori mavjudligi
Bir nechta fayl tizimlarida nom tugunining metama'lumotlarini takrorlash va nazorat qilish uchun ikkilamchi nom tugunidan foydalanish kombinatsiyasi ma'lumotlarni yo'qotishdan himoya qiladi, lekin tizimning yuqori mavjudligini ta'minlamaydi. Nom tugunlari hali ham bitta muvaffaqiyatsizlik nuqtasidir. Agar bu nuqtada xatolik yuz bersa, barcha mijozlar, shu jumladan MapReduce ishlari - O'qish, yozish yoki fayllar ro'yxatini olish qobiliyatini yo'qoting, chunki nom tuguni metadata va fayllar va bloklar o'rtasidagi yozishmalar haqidagi ma'lumotlarning yagona ombori hisoblanadi. Bunday holda, butun Hadoop tizimi aslida yangi tugun ishga tushmaguncha muvaffaqiyatsiz bo'ladi.
Xulosa
Bunday vaziyatda nom tugunidagi nosozlikni tiklash uchun administrator fayl tizimining metama’lumotlar replikalaridan biri bilan yangi asosiy nom tugunini ishga tushiradi va ma’lumotlar tugunlari va mijozlarni yangi tugundan foydalanish uchun sozlaydi.