Vai AWS atbalsta Hadoop?
Vai AWS atbalsta Hadoop?

Video: Vai AWS atbalsta Hadoop?

Video: Vai AWS atbalsta Hadoop?
Video: Введение в веб-сервисы Amazon, Лев Жадановский 2024, Maijs
Anonim

Apache™ Hadoop ® ir atvērtā pirmkoda programmatūras projekts, ko var izmantot, lai efektīvi apstrādātu lielas datu kopas. Amazon EMR ļauj viegli izveidot un pārvaldīt pilnībā konfigurētas, elastīgas kopas Amazon EC2 darbojas gadījumi Hadoop un citas lietojumprogrammas Hadoop ekosistēma.

Tātad, vai AWS izmanto Hadoop?

Amazon Tīmekļa pakalpojumi lietojumiem atvērtā koda Apache Hadoop izplatīta skaitļošanas tehnoloģija, lai atvieglotu piekļuvi lielam skaitļošanas jaudas apjomam datu ietilpīgu uzdevumu veikšanai. Hadoop , Google MapReduce atvērtā pirmkoda versiju, jau izmanto tādi uzņēmumi kā Yahoo un Facebook.

Otrkārt, ko dara AWS EMR? Amazon Elastīgā MapReduce ( EMR ) ir an Amazon Web pakalpojumi ( AWS ) rīks lielu datu apstrādei un analīzei. Amazon EMR apstrādā lielus datus Hadoop virtuālo serveru klasterī Amazon Elastic Compute Cloud ( EC2 ) un Amazon Vienkāršs krātuves pakalpojums (S3).

Tādā veidā kāda ir atšķirība starp Hadoop un AWS?

Hadoop ir sistēma, kas palīdz apstrādāt lielas datu kopas vairākos datoros. Tas ietver Map/Reduce (paralēlā apstrāde) un HDFS (izplatītā failu sistēma). AWS ir datu noliktava, kas izveidota, izmantojot patentētu tehnoloģiju, ko sākotnēji izstrādāja ParAccel. Kādi ir daži izplatītākie Apache lietojumi Hadoop ?

Vai AWS s3 ir Hadoop?

S3 patiesībā ir bezgalīga krātuve mākonī, bet HDFS nav. HDFS tiek mitināts fiziskās iekārtās, tāpēc tajā varat izpildīt jebkuru programmu. Jūs neko nevarat izpildīt S3 jo tas ir tikai objektu veikals, nevis FS.

Ieteicams: