Python-ի ո՞ր տարբերակն է օգտագործում Spark-ը:
Python-ի ո՞ր տարբերակն է օգտագործում Spark-ը:

Video: Python-ի ո՞ր տարբերակն է օգտագործում Spark-ը:

Video: Python-ի ո՞ր տարբերակն է օգտագործում Spark-ը:
Video: Ի՞նչ է ծրագրավորումը, ի՞նչու ծրագրավորել և ինչպե՞ս սովորել ծրագրավորում։ Խորհուրդներ սկսնակներին 2024, Նոյեմբեր
Anonim

Կայծ աշխատում է Java 8+-ով, Պիթոն 2.7+/3.4+ և R 3.1+: Scala API-ի համար, Կայծ 2.3. 0 օգտագործում է Scala 2.11. Ձեզ անհրաժեշտ կլինի օգտագործել համատեղելի Scala տարբերակը (2.11.

Համապատասխանաբար, կայծը աշխատում է Python 3-ի հետ:

Ապաչի Կայծ կլաստերային հաշվարկային շրջանակ է, որը ներկայումս ամենաակտիվ զարգացածներից մեկն է բաց կոդով Big Data ասպարեզում: Քանի որ վերջին տարբերակը 1.4 (հունիս 2015), Կայծ աջակցում է R և Python 3 (լրացնելու համար նախկինում հասանելի աջակցությունը Java, Scala և Պիթոն 2).

Բացի վերևից, ինչպես կարող եմ փոխել Python-ի կայծային տարբերակը: Այն դեպքում, երբ դուք միայն ցանկանում եք փոփոխություն որ python տարբերակը ընթացիկ առաջադրանքի համար կարող եք օգտագործել հետևյալ pyspark start հրամանը՝ PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ պիթոն PYSPARK_PYTHON=/usr/local/anaconda2/bin/ պիթոն pyspark -- վարպետ..

Ավելին, ո՞րն է վերջին կայծային տարբերակը:

Apache Spark

Բնօրինակ հեղինակ(ներ) Մատեյ Զահարիա
Նախնական թողարկում 26 մայիսի, 2014թ
Կայուն թողարկում 2.4.5 / 8 փետրվարի, 2020 թ
Պահեստարան Spark Repository
Գրված է Սկալա

Ի՞նչ է spark Python-ը:

Մեծ տվյալների ընտելացում Apache-ով Կայծ և Պիթոն Py4J-ը հանրաճանաչ գրադարան է, որը ինտեգրված է ներսում PySpark դա թույլ է տալիս պիթոն դինամիկ ինտերֆեյս JVM օբյեկտների հետ (RDD): Ապաչի Կայծ գալիս է ինտերակտիվ կեղևով պիթոն ինչպես դա անում է Scala-ի համար: Կեղևը համար պիթոն հայտնի է որպես « PySpark ”.

Խորհուրդ ենք տալիս: