Er s3 basert på HDFS?
Er s3 basert på HDFS?

Video: Er s3 basert på HDFS?

Video: Er s3 basert på HDFS?
Video: Heart murmurs for beginners 🔥 🔥 🔥 Part 1:Aortic & Mitral stenosis, Aortic & mitral regurgitation. 2024, Mars
Anonim

S3 er faktisk en uendelig lagring i skyen, men HDFS er ikke. HDFS er vert på fysiske maskiner, så du kan kjøre et hvilket som helst program der. Du kan ikke utføre noe på S3 som det bare er Object Store og ikke FS.

Så, er s3 et distribuert filsystem?

S3 er ikke en distribuert filsystem . Det er et binært objektlager som lagrer data i nøkkelverdi-par. Det er egentlig en type NoSQL-database. Hver bøtte er en ny "database", med nøkler som din "mappebane" og verdier er de binære objektene ( filer ).

Man kan også spørre, er AWS basert på Hadoop? Hadoop er et rammeverk som hjelper til med å behandle store datasett på tvers av flere datamaskiner. Det inkluderer kart/reduser (parallell behandling) og HDFS (distribuert filsystem). AWS er et datavarehus bygget på toppen av en proprietær teknologi opprinnelig utviklet av ParAccel.

Foruten dette, hvordan overfører jeg filer fra s3 til HDFS?

Svar. Det er ingen direkte måte å kopiere filer fra S3 til HDFS uten å gå gjennom lokalt filer . Du kan imidlertid bruke tSystem-komponenten i en standard jobb for å kalle den opprinnelige Hadoop kommandoen du vanligvis bruker til kopiere filer , for eksempel, s3 -dist-cp.

Hva er s3 database?

Amazon S3 eller Amazon Simple Storage Service er en tjeneste som tilbys av Amazon Web Services (AWS) som gir objektlagring gjennom et webtjenestegrensesnitt. Amazon S3 bruker den samme skalerbare lagringsinfrastrukturen som Amazon.com bruker til å drive sitt globale e-handelsnettverk.

Anbefalt: