Sadržaj:

Koji su glavni konfiguracijski parametri koje korisnik treba navesti da bi pokrenuo MapReduce posao?
Koji su glavni konfiguracijski parametri koje korisnik treba navesti da bi pokrenuo MapReduce posao?

Video: Koji su glavni konfiguracijski parametri koje korisnik treba navesti da bi pokrenuo MapReduce posao?

Video: Koji su glavni konfiguracijski parametri koje korisnik treba navesti da bi pokrenuo MapReduce posao?
Video: Полный курс TypeScript за час | Тайпскрипт для начинающих 2024, Maj
Anonim

Glavni konfiguracijski parametri koje korisnici trebaju specificirati u okviru “MapReduce” su:

  • Job's ulazne lokacije u distribuiranom sistemu datoteka.
  • Job's izlaznu lokaciju u distribuiranom sistemu datoteka.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Ovdje, koji su glavni konfiguracijski parametri u programu MapReduce?

Glavni konfiguracijski parametri u “MapReduce” okviru su:

  • Unos lokacije poslova u distribuirani sistem datoteka.
  • Izlazna lokacija poslova u distribuiranom sistemu datoteka.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Također se može zapitati, koji su parametri mapera i reduktora? Četiri parametra za mapere su:

  • Long Writable (unos)
  • tekst (unos)
  • tekst (srednji izlaz)
  • IntWritable (srednji izlaz)

Također se postavlja pitanje koje su glavne komponente MapReduce posla?

  • Glavna klasa drajvera koja daje parametre konfiguracije posla.
  • Mapper klasa koja mora proširiti org. apache. hadoop. mapreduce. Mapper klasa i obezbijedi implementaciju za metodu map ().
  • Reducer klasa koja bi trebala proširiti org. apache. hadoop. mapreduce. Reducer class.

Šta je particioner i kako pomaže u MapReduce procesu posla?

Partitioner in MapReduce posao izvršenje kontroliše particionisanje ključeva posrednih izlaza mape. Sa pomoć od hash funkcije, ključ (ili podskup ključa) izvodi particija . Zapisi koji imaju istu vrijednost ključa ulaze u isti particija (unutar svakog mapera).

Preporučuje se: