Mündəricat:

MapReduce işini yerinə yetirmək üçün istifadəçinin müəyyən etməli olduğu əsas konfiqurasiya parametrləri hansılardır?
MapReduce işini yerinə yetirmək üçün istifadəçinin müəyyən etməli olduğu əsas konfiqurasiya parametrləri hansılardır?

Video: MapReduce işini yerinə yetirmək üçün istifadəçinin müəyyən etməli olduğu əsas konfiqurasiya parametrləri hansılardır?

Video: MapReduce işini yerinə yetirmək üçün istifadəçinin müəyyən etməli olduğu əsas konfiqurasiya parametrləri hansılardır?
Video: PRODUCTIF с MAP REDUCE или SCAN - 2416 2024, Noyabr
Anonim

İstifadəçilərin “MapReduce” çərçivəsində müəyyən etməli olduğu əsas konfiqurasiya parametrləri bunlardır:

  • İşin paylanmış fayl sistemindəki giriş yerləri.
  • İşin paylanmış fayl sistemində çıxış yeri.
  • Məlumatların daxil edilməsi formatı.
  • Məlumatların çıxış formatı.
  • Xəritə funksiyasını ehtiva edən sinif.
  • Azaltma funksiyasını ehtiva edən sinif.

Burada MapReduce proqramında əsas konfiqurasiya parametrləri hansılardır?

“MapReduce” çərçivəsindəki əsas konfiqurasiya parametrləri bunlardır:

  • Paylanmış fayl sistemində İşlərin daxil olduğu yer.
  • Paylanmış fayl sistemində İşlərin çıxış yeri.
  • Məlumatların daxil edilməsi formatı.
  • Məlumatın çıxış formatı.
  • Xəritə funksiyasını ehtiva edən sinif.
  • Azaltma funksiyasını ehtiva edən sinif.

Bir də sual oluna bilər ki, xəritəçilərin və reduktorların parametrləri nədir? Xəritəçəkənlər üçün dörd parametr bunlardır:

  • LongWritable (giriş)
  • mətn (giriş)
  • mətn (aralıq çıxış)
  • IntWritable (aralıq çıxış)

Həmçinin sual yaranır ki, MapReduce işinin əsas komponentləri hansılardır?

  • İşin konfiqurasiya parametrlərini təmin edən əsas sürücü sinfi.
  • org-u genişləndirməli olan Mapper sinfi. apache. hadoop. mapreduce. Mapper sinfi və map () metodunun tətbiqini təmin edir.
  • Orq-u genişləndirməli olan reduktor sinfi. apache. hadoop. mapreduce. Reduktor sinfi.

Partitioner nədir və MapReduce iş prosesində necə kömək edir?

Bölmə in MapReduce işi icra aralıq xəritə-çıxışların açarlarının bölünməsinə nəzarət edir. İlə kömək hash funksiyasının açarı (və ya açarın bir alt çoxluğu) əldə edir bölmə . Eyni açar dəyəri olan qeydlər eyni yerə daxil olur bölmə (hər mapper daxilində).

Tövsiyə: