Mündəricat:

Mən yerli olaraq qığılcım işlədə bilərəmmi?
Mən yerli olaraq qığılcım işlədə bilərəmmi?

Video: Mən yerli olaraq qığılcım işlədə bilərəmmi?

Video: Mən yerli olaraq qığılcım işlədə bilərəmmi?
Video: THE FUTURE IS FLIP 5 2024, Noyabr
Anonim

Spark bilər olmaq qaçmaq daxilində quraşdırılmış müstəqil klaster planlaşdırıcısından istifadə etməklə yerli rejimi. Bu o deməkdir ki, bütün Qığılcım proseslərdir qaçmaq eyni JVM daxilində-səmərəli, tək, çox iş parçacığı nümunəsi Qığılcım.

Bu baxımdan Apache spark-ı yerli olaraq necə işlədə bilərəm?

Aşağıdakı addımlar Apache Spark-ı necə quraşdırmağı göstərir

  1. Addım 1: Java Quraşdırmasının Doğrulanması.
  2. Addım 2: Scala quraşdırılmasının yoxlanması.
  3. Addım 3: Scala yükləyin.
  4. Addım 4: Scala quraşdırılması.
  5. Addım 5: Apache Spark yükləyin.
  6. Addım 6: Spark-ın quraşdırılması.
  7. Addım 7: Spark quraşdırılmasının yoxlanılması.

Bundan əlavə, Hadoop olmadan qığılcım işlədə bilərikmi? kimi Qığılcım sənədlər, Spark Hadoop olmadan işləyə bilər . Sən bilər idarə et müstəqil rejim kimi olmadan istənilən resurs meneceri. Amma əgər Sən istəyirəm qaçmaq çox qovşaqlı quraşdırmada, Sən YARN və ya Mesos kimi resurs meneceri və kimi paylanmış fayl sistemi lazımdır HDFS , S3 və s. Bəli, qığılcım hadoop olmadan işləyə bilər.

Yuxarıdan əlavə olaraq, müstəqil rejimdə qığılcımı necə işə sala bilərəm?

Quraşdırmaq üçün Spark Standalone rejimi , sadəcə olaraq tərtib edilmiş versiyasını yerləşdirin Qığılcım klasterdəki hər bir qovşaqda. Əvvəlcədən qurulmuş versiyalarını əldə edə bilərsiniz Qığılcım hər buraxılışla və ya özünüz qurun.

Windows-da qığılcım işləyə bilərmi?

A Qığılcım tətbiq bacarmaq olmaq a Windows -qabıq skripti və ya bu bacarmaq yazılı Java, Scala, Python və ya R-də xüsusi proqram olmalıdır. Sizə lazımdır Windows sisteminizdə quraşdırılmış icra faylları qaçmaq bu tətbiqlər.

Tövsiyə: