Vai s3 pamatā ir HDFS?
Vai s3 pamatā ir HDFS?

Video: Vai s3 pamatā ir HDFS?

Video: Vai s3 pamatā ir HDFS?
Video: Введение в веб-сервисы Amazon, Лев Жадановский 2024, Marts
Anonim

S3 patiesībā ir bezgalīga krātuve mākonī, bet HDFS nav. HDFS tiek mitināts fiziskās iekārtās, tāpēc tajā varat izpildīt jebkuru programmu. Jūs neko nevarat izpildīt S3 jo tas ir tikai objektu veikals, nevis FS.

Vai tad s3 ir izplatīta failu sistēma?

S3 nav a izplatīta failu sistēma . Tas ir binārs objektu veikals, kurā dati tiek glabāti atslēgu un vērtību pāros. Tas būtībā ir NoSQL datu bāzes veids. Katrs segments ir jauna "datu bāze", kur atslēgas ir jūsu "mapes ceļš" un vērtības ir bināri objekti ( failus ).

Var arī jautāt, vai AWS pamatā ir Hadoop? Hadoop ir sistēma, kas palīdz apstrādāt lielas datu kopas vairākos datoros. Tas ietver Karte/Samazināt (paralēlā apstrāde) un HDFS (izplatītā failu sistēma). AWS ir datu noliktava būvēts papildus patentētai tehnoloģijai, ko sākotnēji izstrādāja ParAccel.

Papildus tam, kā pārsūtīt failus no s3 uz HDFS?

Atbilde. Nav tieša veids, kā kopēt failus no S3 uz HDFS neejot cauri vietējai failus . Tomēr standarta uzdevumā varat izmantot komponentu tSystem, lai izsauktu vietējo Hadoop komandu, kuru parasti izmantojat kopēt failus , piemēram, s3 -dist-cp.

Kas ir s3 datu bāze?

Amazon S3 vai Amazon Simple Storage Service ir pakalpojums, ko piedāvā Amazon Web Services (AWS), kas nodrošina objektu uzglabāšanu, izmantojot tīmekļa pakalpojuma saskarni. Amazon S3 izmanto to pašu mērogojamo krātuves infrastruktūru, ko Amazon.com izmanto sava globālā e-komercijas tīkla vadīšanai.

Ieteicams: