CLOUD
AWS EMR
๐ฐํํ
2023. 1. 13. 14:55
๋ฐ์ํ
AWS EMR ์ ๋น ๋ฐ์ดํฐ ํ๋ซํผ ์ด๋ค. (ํ๋ก ํ๋ซํผ)
ํด๋ฌ์คํฐ ๊ตฌ์ฑ
- ๋ง์คํฐ
Hadoop ์ HDFS Namenode, YARN Resource Manger๊ฐ ์คํ๋๋ ์ธ์คํด์ค ์ด๋ค.
- ์ฝ์ด
๋ง์คํฐ ๋ ธ๋์์ ๊ด๋ฆฌํ๋ฉฐ, Hadoop ์ HDFS Datanode, Yarn Nodemanager, MapReduce Task Tracker, Spark Executor ์คํํจ
- ํ์คํฌ
Datanode ์คํํ์ง ์์ผ๋ฉฐ, HDFS์ ๋ฐ์ดํฐ๋ฅผ ์ ์ฅํ์ง๋ ์์
Spark executor, MapReduce ์ ๊ฐ์ ์์ ์ ์คํํจ
728x90
๋ฐ์ํ