Ano ang Emrfs?
Ano ang Emrfs?

Video: Ano ang Emrfs?

Video: Ano ang Emrfs?
Video: What is AWS EMR | Introduction to Amazon EMR | Intellipaat 2024, Mayo
Anonim

Ang EMR File System ( EMRFS ) ay isang pagpapatupad ng HDFS na ginagamit ng lahat ng Amazon EMR cluster para sa pagbabasa at pagsulat ng mga regular na file mula sa Amazon EMR nang direkta sa Amazon S3. Nagbibigay-daan sa iyo ang pag-encrypt ng data na i-encrypt ang mga bagay na iyon EMRFS sumusulat sa Amazon S3, at pinapagana EMRFS upang gumana sa mga naka-encrypt na bagay sa Amazon S3.

Tungkol dito, ano ang pare-parehong pananaw ng Emrfs?

Ang EMRFS pare-parehong pagtingin lumilikha at gumagamit ng metadata sa isang talahanayan ng Amazon DynamoDB upang mapanatili ang isang pare-parehong pananaw ng iyong mga bagay sa S3. Sinusubaybayan ng talahanayang ito ang ilang partikular na operasyon ngunit hindi nagtataglay ng alinman sa iyong data.

ano ang pagkakaiba ng s3 at s3a? Ito ang pagkakaiba sa pagitan ng ang tatlo: s3 ay isang block-based na overlay sa ibabaw ng Amazon S3 , samantalang s3n/ s3a hindi. Ang mga ito ay object-based. Sinusuportahan ng s3n ang mga bagay hanggang sa 5GB kapag ang laki ay ang pag-aalala, habang s3a sumusuporta sa mga bagay hanggang sa 5TB at may mas mataas na pagganap.

Alinsunod dito, gumagamit ba ang EMR ng HDFS?

EMR File System (EMRFS) Ikaw maaaring gamitin alinman HDFS o Amazon S3 bilang file system sa iyong cluster. Kadalasan, ang Amazon S3 ay ginagamit upang mag-imbak ng data ng input at output at ang mga intermediate na resulta ay iniimbak sa HDFS.

Ano ang s3a?

S3A (URI scheme: s3a ) Isang kahalili sa S3 Katutubo, s3n fs, ang S3a : ginagamit ng system ang mga aklatan ng Amazon upang makipag-ugnayan S3 . Ito ay nagpapahintulot S3a upang suportahan ang mas malalaking file (wala nang 5GB na limitasyon), mas mataas na pagganap ng mga operasyon at higit pa.

Inirerekumendang: