Cos'è Emrfs?
Cos'è Emrfs?

Video: Cos'è Emrfs?

Video: Cos'è Emrfs?
Video: What is Amazon EMR or Elastic MapReduce? Big Data Platform on AWS | AWS New 2024, Novembre
Anonim

Il file system EMR ( EMRFS ) è un'implementazione di HDFS che tutti i cluster Amazon EMR utilizzano per leggere e scrivere file regolari da Amazon EMR direttamente in Amazon S3. La crittografia dei dati consente di crittografare gli oggetti che EMRFS scrive su Amazon S3 e abilita EMRFS per lavorare con oggetti crittografati in Amazon S3.

A questo proposito, qual è la visione coerente di Emrf?

Il Vista coerente EMRFS crea e utilizza i metadati in una tabella Amazon DynamoDB per mantenere a vista coerente dei tuoi oggetti S3. Questa tabella tiene traccia di determinate operazioni ma non contiene nessuno dei tuoi dati.

qual è la differenza tra s3 e s3a? Questo è il differenza tra i tre: s3 è un overlay basato su blocchi su Amazon S3 , mentre s3n/ s3a non sono. Questi sono basati su oggetti. s3n supporta oggetti fino a 5 GB quando la dimensione è la preoccupazione, mentre s3a supporta oggetti fino a 5 TB e ha prestazioni più elevate.

Di conseguenza, EMR utilizza HDFS?

EMR File System (EMRFS) poter usare o HDFS o Amazon S3 come file system nel cluster. Molto spesso, Amazon S3 è utilizzato per memorizzare i dati di input e output e i risultati intermedi sono memorizzati in HDFS.

Cos'è s3a?

S3A (schema URI: s3a ) Un successore del S3 Nativo, s3n fs, il S3a : il sistema utilizza le librerie di Amazon per interagire con S3 . Questo permette S3a per supportare file più grandi (non più limite di 5 GB), operazioni a prestazioni più elevate e altro ancora.

Consigliato: