Ar s3 pagrįstas HDFS?
Ar s3 pagrįstas HDFS?

Video: Ar s3 pagrįstas HDFS?

Video: Ar s3 pagrįstas HDFS?
Video: Which filesystem to use HDFS or Amazon S3 2024, Balandis
Anonim

S3 iš tikrųjų yra begalinė saugykla debesyje, bet HDFS nėra. HDFS yra priglobtas fiziniuose kompiuteriuose, todėl ten galite vykdyti bet kurią programą. Jūs negalite nieko vykdyti S3 nes tai tik objektų parduotuvė, o ne FS.

Tada ar s3 yra paskirstyta failų sistema?

S3 nėra a paskirstyta failų sistema . Tai dvejetainė objektų saugykla, kurioje duomenys saugomi raktų ir reikšmių poromis. Iš esmės tai yra NoSQL duomenų bazės tipas. Kiekvienas segmentas yra nauja „duomenų bazė“, o raktai yra jūsų „aplanko kelias“, o reikšmės yra dvejetainiai objektai ( failus ).

Taip pat galima paklausti, ar AWS pagrįsta Hadoop? Hadoop yra sistema, padedanti apdoroti didelius duomenų rinkinius keliuose kompiuteriuose. Tai apima Map / Reduce (lygiagretus apdorojimas) ir HDFS (paskirstyta failų sistema). AWS yra duomenų saugykla pastatytas ant patentuotos technologijos, kurią iš pradžių sukūrė ParAccel.

Be to, kaip perkelti failus iš s3 į HDFS?

Atsakymas. Tiesioginio nėra būdas kopijuoti failus iš S3 į HDFS nepravažiuojant vietinių failus . Tačiau galite naudoti tSystem komponentą standartinėje užduotyje, kad iškviestumėte vietinį elementą Hadoop komanda, kurią paprastai naudojate kopijuoti failus , pavyzdžiui, s3 -dist-cp.

Kas yra s3 duomenų bazė?

Amazon S3 arba „Amazon Simple Storage Service“yra „Amazon Web Services“(AWS) siūloma paslauga, kuri suteikia objektų saugojimą per žiniatinklio paslaugų sąsają. Amazon S3 naudoja tą pačią keičiamo dydžio saugyklos infrastruktūrą, kurią Amazon.com naudoja pasauliniam el. prekybos tinklui valdyti.

Rekomenduojamas: