Արդյո՞ք AWS-ն աջակցում է Hadoop-ին:
Արդյո՞ք AWS-ն աջակցում է Hadoop-ին:

Video: Արդյո՞ք AWS-ն աջակցում է Hadoop-ին:

Video: Արդյո՞ք AWS-ն աջակցում է Hadoop-ին:
Video: DNS Explained: Understanding root servers 2024, Նոյեմբեր
Anonim

Apache™ Hadoop ®-ը բաց կոդով ծրագրային նախագիծ է, որը կարող է օգտագործվել տվյալների մեծ հավաքածուների արդյունավետ մշակման համար: Amazon EMR-ը հեշտացնում է ամբողջությամբ կազմաձևված, առաձգական կլաստերների ստեղծումն ու կառավարումը Amazon EC2 գործարկվող դեպքեր Hadoop և այլ հավելվածներ Hadoop էկոհամակարգ.

Դրա համար AWS-ն օգտագործում է Hadoop-ը:

Amazon Վեբ ծառայություններ օգտագործում է բաց կոդով Apache-ն Hadoop բաշխված հաշվողական տեխնոլոգիան հեշտացնելու համար մեծ քանակությամբ հաշվողական հզորություն մուտք գործելը տվյալների ինտենսիվ առաջադրանքներ կատարելու համար: Hadoop Google-ի MapReduce-ի բաց կոդով տարբերակը, արդեն օգտագործվում է այնպիսի ընկերությունների կողմից, ինչպիսիք են Yahoo-ն և Facebook-ը:

Երկրորդ, ի՞նչ է անում AWS EMR-ը: Amazon Էլաստիկ քարտեզի կրճատում ( EMR ) է ան Amazon Վեբ ծառայություններ ( AWS ) մեծ տվյալների մշակման և վերլուծության գործիք: Amazon EMR մշակում է մեծ տվյալներ վիրտուալ սերվերների Hadoop կլաստերի վրա Amazon Էլաստիկ հաշվարկային ամպ ( EC2 ) և Amazon Պարզ պահեստավորման ծառայություն (S3):

Այս կերպ, ո՞րն է տարբերությունը Hadoop-ի և AWS-ի միջև:

Hadoop շրջանակ է, որն օգնում է մշակել տվյալների մեծ հավաքածուներ բազմաթիվ համակարգիչներում: Այն ներառում է Map/Reduce (զուգահեռ մշակում) և HDFS (բաշխված ֆայլային համակարգ): AWS տվյալների պահեստ է, որը կառուցված է սեփական տեխնոլոգիայի վրա, որն ի սկզբանե մշակվել է ParAccel-ի կողմից: Որոնք են Apache-ի մի քանի ընդհանուր օգտագործում Hadoop ?

AWS s3 Hadoop-ն է:

S3 իրականում անսահման պահեստ է ամպի մեջ, բայց HDFS չէ. HDFS տեղակայված է ֆիզիկական մեքենաների վրա, այնպես որ կարող եք այնտեղ իրականացնել ցանկացած ծրագիր: Դուք չեք կարող որևէ բան իրականացնել S3 քանի որ դրա պարզապես Object Store-ը և ոչ FS-ը:

Խորհուրդ ենք տալիս: