Spark hansı Python versiyasından istifadə edir?
Spark hansı Python versiyasından istifadə edir?

Video: Spark hansı Python versiyasından istifadə edir?

Video: Spark hansı Python versiyasından istifadə edir?
Video: PYTHON NECƏ YÜKLƏNİR? 2024, Noyabr
Anonim

Qığılcım Java 8+ üzərində işləyir, Python 2.7+/3.4+ və R 3.1+. Scala API üçün, Qığılcım 2.3. 0 istifadə edir Scala 2.11. ehtiyacınız olacaq istifadə edin uyğun Scala versiya (2.11.

Müvafiq olaraq, qığılcım Python 3 ilə işləyirmi?

Apache Qığılcım klaster hesablama çərçivəsidir, hazırda açıq mənbəli Big Data arenasında ən fəal şəkildə inkişaf etdirilən sistemlərdən biridir. Ən son 1.4 versiyasından (iyun 2015), Qığılcım R və dəstəkləyir Python 3 (Java, Scala və üçün əvvəllər mövcud dəstəyi tamamlamaq üçün Python 2).

Yuxarıdakılardan əlavə, Python-un qığılcım versiyasını necə dəyişə bilərəm? Yalnız istədiyiniz halda dəyişmək the python versiyası cari tapşırıq üçün aşağıdakı pyspark start əmrindən istifadə edə bilərsiniz: PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ piton PYSPARK_PYTHON=/usr/local/anaconda2/bin/ piton pyspark - usta..

Bundan əlavə, ən son spark versiyası nədir?

Apache Spark

Orijinal müəllif(lər) Matei Zaharia
İlkin buraxılış 26 may 2014-cü il
Stabil buraxılış 2.4.5 / 8 fevral 2020-ci il
Repozitoriya Spark Repository
-də yazılmışdır Scala

Spark Python nədir?

Apache ilə böyük məlumatların ram edilməsi Qığılcım və Python Py4J içərisinə inteqrasiya olunmuş populyar kitabxanadır PySpark imkan verir piton JVM obyektləri (RDD) ilə dinamik interfeys. Apache Qığılcım üçün interaktiv qabıqla gəlir piton Scala üçün olduğu kimi. Üçün qabıq piton kimi tanınır PySpark ”.

Tövsiyə: