Ի՞նչ նորություն կա Spark-ում:
Ի՞նչ նորություն կա Spark-ում:

Video: Ի՞նչ նորություն կա Spark-ում:

Video: Ի՞նչ նորություն կա Spark-ում:
Video: Ում է հակացուցված կեռաս ուտել և ինչ է կատարվում օրգանիզմի հետ, երբ կեռաս և բալ եք ուտում 2024, Մայիս
Anonim

Բացի վրիպակների շտկումներից, կան 2 նոր հատկանիշները մեջ Կայծ 2.4: ԿԱՅԾ -22239 Օգտագործողի կողմից սահմանված պատուհանի գործառույթները Pandas UDF-ով: ԿԱՅԾ -22274 Օգտատիրոջ կողմից սահմանված ագրեգացիոն գործառույթներ pandas udf-ով: Մենք հավատում ենք սրանք նոր առանձնահատկությունները հետագայում կբարելավեն Pandas UDF-ի ընդունումը, և մենք կշարունակենք բարելավել Pandas UDF-ն հաջորդ թողարկումներում:

Նմանապես, ո՞րն է Spark-ի վերջին տարբերակը:

Պատմություն

Տարբերակ Բնօրինակ թողարկման ամսաթիվ Վերջին տարբերակը
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Լեգենդ. Հին տարբերակ Ավելի հին տարբերակ, դեռ պահպանվում է Վերջին տարբերակը Վերջին նախադիտման տարբերակը

Բացի վերևից, արդյո՞ք spark SQL ANSI-ն համապատասխանում է: Քանի որ Կայծ 2.0, Կայծ է ANSI SQL :2003 համապատասխան , ինչը նշանակում է Spark SQL աջակցում է SQL գործողություններ, որոնք հասանելի չեն այլ բարբառներում:

Այստեղ, spark-ն աջակցում է Java 11-ին:

Սկալա և Java օգտվողները կարող են ներառել Կայծ իրենց նախագծերում, օգտագործելով իր Maven կոորդինատները և Python օգտվողները կարող են տեղադրել Կայծ PyPI-ից: Կայծ վազում է Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ և R 3.1+։

Արդյո՞ք Spark SQL-ն աջակցում է թարմացումներին:

2 Պատասխաններ. Spark SQL չի անում աջակցություն UPDATE հայտարարություններ դեռ. Փեթակը սկսվել է աջակցում է UPDATE-ին քանի որ փեթակ տարբերակը 0.14. Բայց նույնիսկ Փեթակով, դա աջակցում է թարմացումներին /ջնջում է միայն այն աղյուսակների վրա, որոնք աջակցություն գործարքներ, նշված է փեթակի փաստաթղթերում:

Խորհուրդ ենք տալիս: