Je li s3 baziran na HDFS-u?
Je li s3 baziran na HDFS-u?

Video: Je li s3 baziran na HDFS-u?

Video: Je li s3 baziran na HDFS-u?
Video: The Expert (Short Comedy Sketch) 2024, Marš
Anonim

S3 je zapravo beskonačno skladištenje u oblaku, ali HDFS nije. HDFS je hostovan na fizičkim mašinama, tako da tamo možete izvršiti bilo koji program. Ne možete izvršiti ništa na S3 jer je to samo Object Store, a ne FS.

Zatim, da li je s3 distribuirani sistem datoteka?

S3 nije a distribuirani sistem datoteka . To je binarno skladište objekata koje pohranjuje podatke u parovima ključ/vrijednost. To je u suštini tip NoSQL baze podataka. Svaka kantica je nova "baza podataka", s ključevima koji su vaša "puta do mape" i vrijednostima koje su binarni objekti ( datoteke ).

Neko se takođe može zapitati da li je AWS zasnovan na Hadoop-u? Hadoop je okvir koji pomaže u obradi velikih skupova podataka na više računara. Uključuje Map/Reduce (paralelna obrada) i HDFS (distribuirani sistem datoteka). AWS je skladište podataka izgrađen na vrhu vlasničke tehnologije koju je prvobitno razvio ParAccel.

Osim ovoga, kako da prenesem fajlove sa s3 na HDFS?

Odgovori. Nema direktnog način kopiranja datoteka sa S3 na HDFS bez prolaska kroz lokalno datoteke . Međutim, možete koristiti komponentu tSystem u standardnom zadatku za pozivanje izvornog Hadoop naredbu koju obično koristite kopirajte fajlove , na primjer, s3 -dist-cp.

Šta je s3 baza podataka?

Amazon S3 ili Amazon Simple Storage Service je usluga koju nudi Amazon Web Services (AWS) koja obezbjeđuje skladištenje objekata putem interfejsa web usluge. Amazon S3 koristi istu skalabilnu infrastrukturu za skladištenje koju Amazon.com koristi za pokretanje svoje globalne mreže e-trgovine.

Preporučuje se: