Turinys:

Kaip suplanuoti avilio darbą oozie?
Kaip suplanuoti avilio darbą oozie?

Video: Kaip suplanuoti avilio darbą oozie?

Video: Kaip suplanuoti avilio darbą oozie?
Video: Building Chronic Illness Coping Skills 2024, Gegužė
Anonim

Į tvarkaraštis Avilio darbą naudojant Oozie , reikia parašyti a Avilys - veiksmas.

hql) jame.

  1. Sukurkite katalogą HDFS, paleisdami žemiau esančią komandą.
  2. hadoop fs -mkdir -p /vartotojas/ oozie /darbo eigos/
  3. Įdėkite darbo eigą. xml, Avilys scenarijus (create_table. hql) ir avilys - svetainė. xml 2 veiksme sukurtame kataloge. Galite naudoti toliau pateiktą komandą.

Taigi, kaip paleisti „Hive“scenarijų „Ozie“?

Vykdykite Hive Jobs su Oozie

  1. Nurodykite avilio vietą. xml parametre job-xml.
  2. Scenarijaus parametre nurodykite scenarijaus pavadinimą (pavyzdžiui, scenarijus. q), kuriame yra avilio užklausa.
  3. Pasirinktinai pridėkite ypatybių, naudojamų „Oozie“paleidimo priemonės darbui. Pridėkite priešdėlį oozie. paleidimo priemonė prie nuosavybės pavadinimų.

Be to, kaip paleisti oozie darbo eigą? Vykdoma „Oozie“darbo eiga iš komandinės eilutės

  1. Prisijunkite prie žiniatinklio konsolės.
  2. Nukopijuokite oozie pavyzdžius į savo namų katalogą žiniatinklio konsolėje: cp /usr/hdp/current/oozie-client/doc/oozie-examples. deguto. gz.
  3. Išskleiskite failus iš tar tar -zxvf oozie-examples.tar.gz.
  4. Nukopijuokite pavyzdžių katalogą į HDFS hadoop fs -copyFromLocal pavyzdžius.

Šiuo atžvilgiu kaip suplanuoti „Hadoop“darbą?

Kaip suplanuoti darbus in hadoop - Quora. Paprasčiausias būdas yra suvynioti kodą į apvalkalo scenarijų ir tvarkaraštį tai kaip kronas darbas kraštiniame mazge (mazgas, kuriame paprastai pateikiate savo darbo vietų ). Tačiau paprastai supakuojant kodą į scenarijų ir paleidžiant jį kaip a darbas sunku derinti. išbandyti ir prižiūrėti.

Kas yra oozie darbo eiga?

Oozie yra darbo eiga planavimo sistema, skirta valdyti „Apache Hadoop“užduotis. Oozie darbo eiga darbo vietos yra veiksmų nukreipti acikliniai grafikai (DAG). Oozie Koordinatoriaus darbai yra pasikartojantys Oozie darbo eiga užduotys, kurias sukelia laikas (dažnis) ir duomenų prieinamumas. Oozie yra keičiamo dydžio, patikima ir išplečiama sistema.

Rekomenduojamas: