Mündəricat:

Spark-ın Linux quraşdırılıb-quraşdırılmadığını necə bilə bilərəm?
Spark-ın Linux quraşdırılıb-quraşdırılmadığını necə bilə bilərəm?

Video: Spark-ın Linux quraşdırılıb-quraşdırılmadığını necə bilə bilərəm?

Video: Spark-ın Linux quraşdırılıb-quraşdırılmadığını necə bilə bilərəm?
Video: Apache Spark - Install Apache Spark On Ubuntu |Spark Tutorial | Part 6 2024, Bilər
Anonim

2 Cavablar

  1. Açıq Qığılcım shell Terminal və əmr daxil edin.
  2. sc.version Və ya qığılcım -submit --versiya.
  3. Ən asan yol sadəcə işə salmaqdır” qığılcım -shell” əmr satırında. O, göstərəcək.
  4. cari aktiv versiyası Qığılcım .

Həmçinin bilmək lazımdır ki, spark-ın Ubuntu quraşdırılıb-qurulmadığını necə bilə bilərəm?

Ubuntu-da Spark-ın quraşdırılması

  1. Spark-ın son buraxılışını buradan yükləyin.
  2. Arxivi paketdən çıxarın.
  3. Yaranan qovluğu köçürün və simvolik bir keçid yaradın ki, Spark-ın bir neçə versiyası quraşdırılsın.
  4. Spark qabığını sınayın.
  5. Bəlkə Scala sizin fincan çayınız deyil və siz Python-dan istifadə etməyi üstün tutursunuz.

İkincisi, EMR-də qığılcım harada quraşdırılıb? kimi emr -4.0. 0, bütün proqramlar açıqdır EMR /usr/lib içərisindədir. Qığılcım /usr/lib/ daxilindədir qığılcım.

Beləliklə, bir qığılcım necə qurulur?

Spark-ı quraşdırmaq üçün addımlar

  1. Addım 1: Java-nın quraşdırıldığından əmin olun.
  2. Addım 2: Scala quraşdırıldığından əmin olun.
  3. Addım 3: Scala proqramını yükləyin.
  4. Addım 4: Scala quraşdırın.
  5. Addım 5: Apache Spark-ı yükləyin.
  6. Addım 6: Spark-ın quraşdırılması.
  7. Addım 7: Spark proqramının sisteminizdə quraşdırılmasını yoxlayın.

Spark üçün Scala quraşdırmalıyam?

Sən … əcəksən ehtiyac uyğun istifadə etmək Scala versiyası (2.10. x). Java mütləqdir Qığılcım + bir çox digər keçid asılılıqları ( skala kompilyator sadəcə JVM üçün kitabxanadır). PySpark sadəcə olaraq Py4J (Python-Java qarşılıqlı əlaqəsi) istifadə edərək JVM-ə uzaqdan (soket vasitəsilə) qoşulur.

Tövsiyə: