Բովանդակություն:

Ինչպես կարող եմ իմանալ, արդյոք Spark-ը տեղադրված է Linux-ում:
Ինչպես կարող եմ իմանալ, արդյոք Spark-ը տեղադրված է Linux-ում:

Video: Ինչպես կարող եմ իմանալ, արդյոք Spark-ը տեղադրված է Linux-ում:

Video: Ինչպես կարող եմ իմանալ, արդյոք Spark-ը տեղադրված է Linux-ում:
Video: Windows 11/ Server 2022 kernel router and route table: How it works! 2024, Նոյեմբեր
Anonim

2 Պատասխաններ

  1. Բաց Կայծ shell Terminal և մուտքագրեք հրամանը:
  2. sc.տարբերակ Կամ կայծ -ներկայացնել --տարբերակ.
  3. Ամենահեշտ ճանապարհը պարզապես գործարկելն է» կայծ -shell» հրամանի տողում: Այն կցուցադրի.
  4. ընթացիկ ակտիվ տարբերակը Կայծ .

Նաև իմանալ, թե ինչպես կարող եմ իմանալ, արդյոք կայծը տեղադրված է Ubuntu-ում:

Spark-ի տեղադրում Ubuntu-ում

  1. Ներբեռնեք Spark-ի վերջին թողարկումն այստեղ:
  2. Բացեք արխիվը:
  3. Տեղափոխեք ստացված թղթապանակը և ստեղծեք խորհրդանշական հղում, որպեսզի կարողանաք տեղադրել Spark-ի մի քանի տարբերակներ:
  4. Փորձարկեք Spark կեղևը:
  5. Միգուցե Scala-ն ձեր թեյի բաժակը չէ, և դուք կնախընտրեիք օգտագործել Python-ը:

Երկրորդ, որտեղ է կայծը տեղադրված EMR-ի վրա: Քանի որ emr -4.0. 0, բոլոր հավելվածները միացված են EMR գտնվում են /usr/lib-ում: Կայծ գտնվում է /usr/lib/-ում կայծ.

Հետևաբար, ինչպե՞ս եք կայծ դնում:

Spark-ի տեղադրման քայլեր

  1. Քայլ 1. Համոզվեք, որ Java-ն տեղադրված է:
  2. Քայլ 2. Համոզվեք, որ Scala-ն տեղադրված է:
  3. Քայլ 3. Ներբեռնեք Scala-ն:
  4. Քայլ 4. Տեղադրեք Scala-ն:
  5. Քայլ 5. Ներբեռնում Apache Spark-ը:
  6. Քայլ 6. Spark-ի տեղադրում:
  7. Քայլ 7. Ստուգեք Spark հավելվածի տեղադրումը ձեր համակարգում:

Պե՞տք է Scala-ն տեղադրեմ կայծի համար:

Դու պետք է կարիք օգտագործել համատեղելի Սկալա տարբերակ (2.10. x).» Java-ն պարտադիր է Կայծ + շատ այլ անցումային կախվածություններ ( սկալա կոմպիլյատորը պարզապես գրադարան է JVM-ի համար): PySpark-ը պարզապես հեռակա կարգով (վարդակից) միանում է JVM-ին՝ օգտագործելով Py4J (Python-Java փոխգործակցություն):

Խորհուրդ ենք տալիս: