Koji su glavni konfiguracijski parametri koje korisnik treba navesti da bi pokrenuo MapReduce posao?
Koji su glavni konfiguracijski parametri koje korisnik treba navesti da bi pokrenuo MapReduce posao?
Anonim

Glavni konfiguracijski parametri koje korisnici trebaju specificirati u okviru “MapReduce” su:

  • Job's ulazne lokacije u distribuiranom sistemu datoteka.
  • Job's izlaznu lokaciju u distribuiranom sistemu datoteka.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Ovdje, koji su glavni konfiguracijski parametri u programu MapReduce?

Glavni konfiguracijski parametri u “MapReduce” okviru su:

  • Unos lokacije poslova u distribuirani sistem datoteka.
  • Izlazna lokacija poslova u distribuiranom sistemu datoteka.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Također se može zapitati, koji su parametri mapera i reduktora? Četiri parametra za mapere su:

  • Long Writable (unos)
  • tekst (unos)
  • tekst (srednji izlaz)
  • IntWritable (srednji izlaz)

Također se postavlja pitanje koje su glavne komponente MapReduce posla?

  • Glavna klasa drajvera koja daje parametre konfiguracije posla.
  • Mapper klasa koja mora proširiti org. apache. hadoop. mapreduce. Mapper klasa i obezbijedi implementaciju za metodu map ().
  • Reducer klasa koja bi trebala proširiti org. apache. hadoop. mapreduce. Reducer class.

Šta je particioner i kako pomaže u MapReduce procesu posla?

Partitioner in MapReduce posao izvršenje kontroliše particionisanje ključeva posrednih izlaza mape. Sa pomoć od hash funkcije, ključ (ili podskup ključa) izvodi particija . Zapisi koji imaju istu vrijednost ključa ulaze u isti particija (unutar svakog mapera).

Preporučuje se: