Satura rādītājs:

Kā ieplānot stropa darbu Ozijā?
Kā ieplānot stropa darbu Ozijā?

Video: Kā ieplānot stropa darbu Ozijā?

Video: Kā ieplānot stropa darbu Ozijā?
Video: Workspace Setup 101 | Hive Webinar 2024, Maijs
Anonim

Uz grafiks Hive darbs izmantojot Oozie , jums jāraksta a Strops - darbība.

hql) tajā.

  1. Izveidojiet direktoriju HDFS, izpildot zem komandas.
  2. hadoop fs -mkdir -p /lietotājs/ oozie /darbplūsmas/
  3. Ievietojiet darbplūsmu. xml, Strops skripts (create_table. hql) un strops - vietne. xml 2. darbībā izveidotajā direktorijā. Varat izmantot tālāk norādīto komandu.

Tātad, kā palaist Hive skriptu programmā oozie?

Veiciet Hive Jobs ar Oozie

  1. Norādiet stropa vietu. xml parametrā job-xml.
  2. Skripta parametrā norādiet skripta nosaukumu (piemēram, skripts. q), kas satur stropu vaicājumu.
  3. Pēc izvēles pievienojiet rekvizītus, ko izmanto Oozie palaišanas darbs. Pievienojiet prefiksu oozie. palaidējs īpašumu nosaukumiem.

Turklāt, kā palaist oozie darbplūsmu? Oozie darbplūsmas palaišana no komandrindas

  1. Piesakieties tīmekļa konsolē.
  2. Kopējiet oozie piemērus savā tīmekļa konsoles mājas direktorijā: cp /usr/hdp/current/oozie-client/doc/oozie-examples. darva. gz.
  3. Izvelciet failus no tar tar -zxvf oozie-examples.tar.gz.
  4. Kopējiet piemēru direktoriju uz HDFS hadoop fs -copyFromLocal piemēriem.

Kā šajā sakarā ieplānot Hadoop darbu?

Kā ieplānot darbus iekšā hadoop - Quora. Vienkāršākais veids ir ietīt savu kodu čaulas skriptā un grafiks to kā kronu darbs malas mezglā (mezglā, kur parasti iesniedzat savu darba vietas ). Bet parasti koda iesaiņošana skriptā un palaišana kā a darbs ir grūti atkļūdot. pārbaudīt un uzturēt.

Kas ir oozie darbplūsma?

Oozie ir darbplūsma plānotāja sistēma, lai pārvaldītu Apache Hadoop darbus. Oozie darbplūsma darbi ir darbību virzīti acikliskie grafiki (DAG). Oozie Koordinatoru darbi ir periodiski Oozie darbplūsma darbi, ko izraisa laiks (biežums) un datu pieejamība. Oozie ir mērogojama, uzticama un paplašināma sistēma.

Ieteicams: