Ի՞նչ է Emrfs-ը:

2024 Հեղինակ: Lynn Donovan | [email protected]. Վերջին փոփոխված: 2023-12-15 23:48

EMR ֆայլային համակարգ ( EMRFS ) HDFS-ի իրականացումն է, որը Amazon EMR-ի բոլոր կլաստերներն օգտագործում են Amazon EMR-ից սովորական ֆայլերը անմիջապես Amazon S3-ում կարդալու և գրելու համար: Տվյալների կոդավորումը թույլ է տալիս գաղտնագրել այն օբյեկտները, որոնք EMRFS գրում է Amazon S3-ին և հնարավորություն է տալիս EMRFS աշխատել կոդավորված օբյեկտների հետ Amazon S3-ում:

Այս առնչությամբ ո՞րն է Էմրֆսի հետևողական տեսակետը:

Այն EMRFS հետևողական տեսակետ ստեղծում և օգտագործում է մետատվյալներ Amazon DynamoDB աղյուսակում՝ ա հետևողական տեսակետ ձեր S3 օբյեկտներից: Այս աղյուսակը հետևում է որոշակի գործողություններ, բայց չի պահում ձեր տվյալները:

ո՞րն է տարբերությունը s3-ի և s3a-ի միջև: Սա է միջև տարբերությունը երեքը: s3 բլոկների վրա հիմնված ծածկույթ է Amazon-ի վերևում S3 , մինչդեռ s3n/ s3a չեն. Սրանք օբյեկտների վրա հիմնված են: s3n-ն աջակցում է մինչև 5 ԳԲ ծավալով օբյեկտներ, երբ չափը մտահոգիչ է, մինչդեռ s3a աջակցում է մինչև 5 ՏԲ օբյեկտներ և ունի ավելի բարձր կատարողականություն:

Համապատասխանաբար, EMR-ն օգտագործում է HDFS:

EMR Ֆայլային համակարգ (EMRFS) Դուք կարող է օգտագործել կամ HDFS կամ Amazon S3-ը որպես ձեր կլաստերի ֆայլային համակարգ: Ամենից հաճախ՝ Amazon S3 է օգտագործվում է մուտքային և ելքային տվյալները պահելու համար, իսկ միջանկյալ արդյունքները պահվում են HDFS.

Ի՞նչ է s3a-ն:

S3A (URI սխեմա. s3a ) իրավահաջորդը S3 Մայրենի, s3n fs, որ S3a Համակարգն օգտագործում է Amazon-ի գրադարանները՝ համագործակցելու համար S3 . Սա թույլ է տալիս S3a աջակցել ավելի մեծ ֆայլեր (ոչ ավելի, 5 ԳԲ սահմանափակում), ավելի բարձր կատարողական գործողություններ և ավելին: