Mündəricat:

Oozie-də pətək işini necə planlaşdırıram?
Oozie-də pətək işini necə planlaşdırıram?

Video: Oozie-də pətək işini necə planlaşdırıram?

Video: Oozie-də pətək işini necə planlaşdırıram?
Video: Overlay Mosaic Crochet from the Center-Out Tutorial 2024, Noyabr
Anonim

Kimə Hive işini planlaşdırın istifadə edərək Oozie , a yazmaq lazımdır Arı şanı -hərəkət.

hql) içində.

  1. Aşağıdakı əmri işə salmaqla HDFS-də kataloq yaradın.
  2. hadoop fs -mkdir -p /user/ oozie /iş axını/
  3. İş axını qoyun. xml, Arı şanı skript (create_table. hql) və Arı şanı -Sayt. xml 2-ci addımda yaradılmış kataloqda. Aşağıdakı əmrdən istifadə edə bilərsiniz.

Beləliklə, mən Hive skriptini oozie-də necə işlədə bilərəm?

Hive Jobs-u Oozie ilə idarə edin

  1. Pətək yerini müəyyənləşdirin. iş-xml parametrində xml.
  2. Skript parametrində pətək sorğusunu ehtiva edən skriptin adını (məsələn, skript. q) göstərin.
  3. İstəyə görə, Oozie başlatma işi tərəfindən istifadə edilən xassələri əlavə edin. Oozie prefiksini əlavə edin. əmlak adlarına başlatma.

Bundan əlavə, mən oozie iş axınını necə idarə edə bilərəm? Komanda Xəttindən Oozie İş axınının icrası

  1. Veb Konsoluna daxil olun.
  2. Oozie nümunələrini veb konsolda ev kataloqunuza kopyalayın: cp /usr/hdp/current/oozie-client/doc/oozie-examples. tar. gz.
  3. tar tar -zxvf oozie-examples.tar.gz-dən faylları çıxarın.
  4. Nümunələr qovluğunu HDFS hadoop fs -copyFromLocal nümunələrinə kopyalayın.

Bu baxımdan Hadoop işini necə planlaşdıra bilərəm?

Necə iş qrafiki in hadoop - Quora. Ən sadə yol, kodunuzu qabıq skriptinə sarmaqdır və cədvəli cron kimi iş kənar node (adətən təqdim etdiyiniz qovşaq işlər ). Amma adətən kodu bir skriptdə qablaşdırıb onu bir kimi işlədir iş debug etmək çətindir. sınaqdan keçirin və qoruyun.

Oozie iş axını nədir?

Oozie a iş axını Apache Hadoop işlərini idarə etmək üçün planlaşdırıcı sistemi. Oozie İş axını işlər hərəkətlərin yönləndirilmiş dövri qrafikləridir (DAG). Oozie Koordinator işləri təkrarlanır Oozie İş axını vaxt (tezlik) və məlumatların mövcudluğu ilə tetiklenen işlər. Oozie genişlənən, etibarlı və genişləndirilə bilən sistemdir.

Tövsiyə: