CLOUD

AWS EMR

🐰히히 2023. 1. 13. 14:55
λ°˜μ‘ν˜•

AWS EMR 은 빅데이터 ν”Œλž«νΌ 이닀. (ν•˜λ‘‘ ν”Œλž«νΌ)

 

ν΄λŸ¬μŠ€ν„° ꡬ성

- λ§ˆμŠ€ν„° 

Hadoop 의 HDFS Namenode, YARN Resource Mangerκ°€ μ‹€ν–‰λ˜λŠ” μΈμŠ€ν„΄μŠ€ 이닀.

- μ½”μ–΄

λ§ˆμŠ€ν„° λ…Έλ“œμ—μ„œ κ΄€λ¦¬ν•˜λ©°, Hadoop 의 HDFS Datanode, Yarn Nodemanager, MapReduce Task Tracker, Spark Executor 싀행함

- νƒœμŠ€ν¬ 

Datanode μ‹€ν–‰ν•˜μ§€ μ•ŠμœΌλ©°, HDFS에 데이터λ₯Ό μ €μž₯ν•˜μ§€λ„ μ•ŠμŒ

Spark executor, MapReduce 와 같은 μž‘μ—…μ„ 싀행함

 

728x90
λ°˜μ‘ν˜•
μ €μž‘μžν‘œμ‹œ λΉ„μ˜λ¦¬ 동일쑰건