Watter weergawe van Python gebruik spark?
Watter weergawe van Python gebruik spark?

Video: Watter weergawe van Python gebruik spark?

Video: Watter weergawe van Python gebruik spark?
Video: Become A Master Of SDXL Training With Kohya SS LoRAs - Combine Power Of Automatic1111 & SDXL LoRAs 2024, Desember
Anonim

Vonk loop op Java 8+, Python 2,7+/3,4+ en R 3,1+. Vir die Scala API, Vonk 2.3. 0 gebruike Scala 2.11. Jy sal moet gebruik 'n versoenbare Scala weergawe (2.11.

Werk spark dienooreenkomstig met Python 3?

Apache Vonk is 'n groeprekenaarraamwerk, tans een van die mees aktief ontwikkel in die oopbron Big Data-arena. Sedert die jongste weergawe 1.4 (Junie 2015), Vonk ondersteun R en Python 3 (om die voorheen beskikbare ondersteuning vir Java, Scala en Python 2).

Behalwe hierbo, hoe verander ek die vonkweergawe van Python? As jy net wil verander die python weergawe vir huidige taak, kan jy die volgende pyspark-begin-opdrag gebruik: PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ luislang PYSPARK_PYTHON=/usr/local/anaconda2/bin/ luislang pyspark --meester..

Verder, wat is die nuutste vonk-weergawe?

Apache Spark

Oorspronklike skrywer(s) Matei Zaharia
aanvanklike vrystelling 26 Mei 2014
Stabiele vrystelling 2.4.5 / 8 Februarie 2020
Bewaarplek Vonkbewaarplek
Geskryf in Scala

Wat is spark Python?

Om groot data te tem met Apache Vonk en Python Py4J is 'n gewilde biblioteek geïntegreer binne PySpark dit laat luislang koppelvlak dinamies met JVM-voorwerpe (RDD's). Apache Vonk kom met 'n interaktiewe dop vir luislang soos dit vir Scala doen. Die dop vir luislang staan bekend as PySpark ”.

Aanbeveel: