Sadržaj:

Kako da zakažem posao košnice u oozie-u?
Kako da zakažem posao košnice u oozie-u?

Video: Kako da zakažem posao košnice u oozie-u?

Video: Kako da zakažem posao košnice u oozie-u?
Video: Oozie Workflow | Hadoop Scheduler 2024, Novembar
Anonim

To raspored Hive posao koristeći Oozie , potrebno je da napišete a Košnica -akcija.

hql) u njemu.

  1. Kreirajte direktorij u HDFS-u aktiviranjem donje naredbe.
  2. hadoop fs -mkdir -p /korisnik/ oozie /tokovi/
  3. Stavite radni tok. xml, Košnica skripta (create_table. hql) i košnica -site. xml u direktoriju kreiranom u koraku 2. Možete koristiti naredbu ispod.

Samo tako, kako da pokrenem Hive skriptu u oozie-u?

Pokreni Hive Jobs sa Ooziejem

  1. Odredite lokaciju košnice. xml u parametru job-xml.
  2. Navedite ime skripte (na primjer, skripta. q) koja sadrži upit košnice u parametru skripte.
  3. Opcionalno, dodajte svojstva koja koristi posao pokretača Oozie. Dodajte prefiks oozie. pokretač na nazive svojstava.

Štaviše, kako da pokrenem oozie workflow? Pokretanje Oozie Workflow iz komandne linije

  1. Prijavite se na web konzolu.
  2. Kopirajte oozie primjere u svoj početni direktorij na web konzoli: cp /usr/hdp/current/oozie-client/doc/oozie-examples. tar. gz.
  3. Izvucite datoteke iz tar tar -zxvf oozie-examples.tar.gz.
  4. Kopirajte direktorij primjera u HDFS hadoop fs -copyFromLocal examples.

S tim u vezi, kako da zakažem Hadoop posao?

Kako raspored poslova in hadoop - Quora. Najjednostavniji način je da umotate svoj kod u shell skriptu i raspored to kao cron posao na rubnom čvoru (čvor na koji obično šaljete svoje poslovi ). Ali obično pakujemo kod u skriptu i izvodimo ga kao a posao teško je otkloniti greške. testirati i održavati.

Šta je oozie workflow?

Oozie je radni tok Planer sistem za upravljanje Apache Hadoop poslovima. Oozie Workflow poslovi su usmjereni aciklični grafovi (DAG) akcija. Oozie Poslovi koordinatora se ponavljaju Oozie Workflow poslovi pokrenuti vremenom (učestalošću) i dostupnošću podataka. Oozie je skalabilan, pouzdan i proširiv sistem.

Preporučuje se: