์ผ | ์ | ํ | ์ | ๋ชฉ | ๊ธ | ํ |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
- ๋ฆฌ๋ ์ค
- hadoop
- ๋ฐ์ดํฐ๋ถ์์ค์ ๋ฌธ๊ฐ
- ๋น ๋ฐ์ดํฐ
- rpmbuild
- ํ๋ก์ค์น
- BIGDATA
- elastic stack
- ๋ฆฌ๋ ์ค RPM
- ์คํํฌ
- LeetCode
- aws ccp
- CLF-C02
- ์ค์๋ธ
- HBase
- ํด ์ค์น
- ํ์ด๋ธ
- ansible
- ์ํ์น ์คํํฌ
- standalone
- Apache spark
- airflow
- ํ๋ก์์ฝ์์คํ
- ๋ฆฟ์ฝ๋
- ์ค์๋ธ ์ค์น
- ์๋ผ์คํฑ์์น
- ์ค์นผ๋ผ ๋ถ
- ํ๋ก
- kudu
- ์ฑ๊ธ์๋ฒ
- Today
- Total
๋ชฉ๋ก๋ฏธ์ฌ์ฉ/[ ํ๋ก ์๋ฒฝ ๊ฐ์ด๋๐ ] (1)
data_lab
ํ๋ก๊ธฐ์ด ํ๋ก๊ณผ์ ๋ง๋จ ๋งต๋ฆฌ๋์ค ๋ฐ์ดํฐ ์ฒ๋ฆฌ๋ฅผ ์ํ ํ๋ก๊ทธ๋๋ฐ์ด๋ค. ๋งต๊ณผ ๋ฆฌ๋์ค ๊ฐ ๋จ๊ณ๋ ์ ๋ ฅ๊ณผ ์ถ๋ ฅ์ผ๋ก ํค-๊ฐ ์ ์ ๋ ฅ - ๋งต - ์ ํ - ๋ฆฌ๋์ค - ์ถ๋ ฅ ๋งต๋ฆฌ๋์ค ์ก - ํด๋ผ์ด์ธํธ๊ฐ ์ํํ๋ ์์ ์ ๊ธฐ๋ณธ ๋จ์ ์ก - ๋งต ํ์คํฌ, ๋ฆฌ๋์ค ํ์คํฌ ๊ฐ ํ์คํฌ๋ YARN์ ์ด์ฉํด ์ค์ผ์ฅด๋ง๋จ ๋งต ํ์คํฌ์ ๊ฒฐ๊ณผ๋ HDFS๊ฐ ์๋ ๋ก์ปฌ์ ์ ์ฅ๋จ ์ก์ด ์๋ฃ๋ ํ ๋งต ํ์คํฌ์ ๊ฒฐ๊ณผ๋ ๋ฒ๋ฆผ ํ๋ก ๋ถ์ฐ ํ์ผ์์คํ ๋ถ์ฐํ์ผ์์คํ - ๋คํธ์ํฌ๋ก ์ฐ๊ฒฐ๋ ์ฌ๋ฌ ๋จธ์ ์ ์คํ ๋ฆฌ์ง๋ฅผ ๊ด๋ฆฌํ๋ ํ์ผ์์คํ ๋คํธ์ํฌ ํ๋ก๊ทธ๋จ์ ๋ณต์ก์ฑ์ ๊ฐ์ง๊ณ ์์ผ๋ฉฐ, ์ต๋ ๋์ ๋ ํน์ ๋ ธ๋์ ์ฅ์ ๊ฐ ๋ฐ์ํด๋ ์๋ฃ๊ฐ ์ ์ค๋์ง์์ HDFS์ ๊ธฐ๋ณธ๋ธ๋ก๋จ์๋ 128MB๋ก ๊ต์ฅํ ํฐ ๋จ์ -> ํ์ ๋น์ฉ์ ์ต์ํ ํ๊ธฐ์ํจ ๋ธ๋ก์ด ๋งค์ฐ ํฌ๋ฉด ๋ธ๋ก์ ์์์ ์ ํ์..