Kas s3 põhineb HDFS-il?
Kas s3 põhineb HDFS-il?

Video: Kas s3 põhineb HDFS-il?

Video: Kas s3 põhineb HDFS-il?
Video: Ted Lasso: The guys react to meeting Zava 2024, Aprill
Anonim

S3 on tegelikult lõpmatu salvestusruum pilves, kuid HDFS ei ole. HDFS majutatakse füüsilistes masinates, nii et saate seal käivitada mis tahes programmi. Te ei saa midagi teha S3 kui see on lihtsalt objektipood, mitte FS.

Kas s3 on siis hajutatud failisüsteem?

S3 ei ole a hajutatud failisüsteem . See on binaarne objektihoidla, mis salvestab andmed võtme-väärtuste paaridena. See on sisuliselt NoSQL-i andmebaasi tüüp. Iga ämber on uus "andmebaas", mille võtmed on teie "kaustatee" ja väärtused on binaarobjektid ( failid ).

Võib ka küsida, kas AWS põhineb Hadoopil? Hadoop on raamistik, mis aitab töödelda suuri andmekogumeid mitmes arvutis. See sisaldab Map/Reduce (paralleeltöötlus) ja HDFS (hajutatud failisüsteem). AWS on andmeladu ehitatud lisaks patenteeritud tehnoloogiale, mille algselt töötas välja ParAccel.

Lisaks sellele, kuidas faile s3-st HDFS-i üle kanda?

Vastus. Otsest ei ole viis failide kopeerimiseks S3-st HDFS-i kohalikku läbimata failid . Siiski võite kasutada tavatöös komponenti tSystem, et helistada algsele tööle Hadoop käsk, mida tavaliselt kasutate failide kopeerimine , näiteks, s3 -dist-cp.

Mis on s3 andmebaas?

Amazon S3 või Amazon Simple Storage Service on Amazon Web Servicesi (AWS) pakutav teenus, mis pakub objektide salvestamist veebiteenuse liidese kaudu. Amazon S3 kasutab sama skaleeritavat salvestusinfrastruktuuri, mida Amazon.com kasutab oma ülemaailmse e-kaubanduse võrgu käitamiseks.

Soovitan: