๋ฐ์ํ
250x250
Notice
Recent Posts
Recent Comments
Link
์ผ | ์ | ํ | ์ | ๋ชฉ | ๊ธ | ํ |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- HBase
- ๋น ๋ฐ์ดํฐ
- aws ccp
- Apache spark
- CLF-C02
- airflow
- ๋ฐ์ดํฐ๋ถ์์ค์ ๋ฌธ๊ฐ
- ๋ฆฟ์ฝ๋
- ์ฑ๊ธ์๋ฒ
- ansible
- rpmbuild
- standalone
- ์ค์๋ธ
- BIGDATA
- ํ๋ก์์ฝ์์คํ
- ์คํํฌ
- ์ค์นผ๋ผ ๋ถ
- ์ค์๋ธ ์ค์น
- elastic stack
- ํ๋ก
- LeetCode
- ํด ์ค์น
- ๋ฆฌ๋ ์ค
- hadoop
- ์๋ผ์คํฑ์์น
- ๋ฆฌ๋ ์ค RPM
- ์ํ์น ์คํํฌ
- kudu
- ํ๋ก์ค์น
- ํ์ด๋ธ
Archives
- Today
- Total
data_lab
Imapa VS Hive ๋ณธ๋ฌธ
ํด๋น ๊ธ์ ์ ํฌ๋ธ๋ณด๊ณ ๋ฒ์ญ ๋ฐ ์ ๋ฆฌํ ๊ธ์ ๋๋ค.
Hive | Impala | |
์ํคํ ์ณ | ๋งต๋ฆฌ๋์ค ๊ธฐ๋ฐ์ผ๋ก ์คํ ๋์์ผ๋, ๋ค์ํ ์์ง ์ง์ - ๋งต๋ฆฌ๋์ค - tez - ์คํํฌ ์ต๊ทผ์ tez๊ฐ ๊ธฐ๋ณธ์์ง์ผ๋ก ๋์จ๋ค๊ณ ๋ค์๋๋ฐ ํ์ธํ์ํจ |
๋๊ท๋ชจ ๋ณ๋ ฌ ์ปดํจํฐ RAM ๋ง์ด ์ |
์ธ์ด | ์๋ฐ | C++ |
์ฌ์ฉ ์์ | ETL ๊ณผ๊ฑฐ ์ผ๊ด ์ฒ๋ฆฌ Tez ๋ฐ LLAP๋ฅผ ํตํด interactive query์ ๊ฐ๊น์ด ์ฟผ๋ฆฌ๋ฅผ ์ ๊ณต |
์ง์ฐ์๊ฐ ์งง์, interactive query |
์ฅ์ | Fault Torelance ํฐ ํ ์ด๋ธ๋ผ๋ฆฌ ์กฐ์ธ ๊ฐ๋ฅ |
interactive query ํฅ์ (Fault Tolerance ์๋) ์คํ ์คํค๋ง ํํ ์กฐ์ธ ์ต์ ํ |
์ง์ ํ์ผ ํ์ | ํ๋ก ํ์ผ ํฌ๋งท ๋ค์ํ ๊ตฌ์กฐ์ ๋ฐ์ ํ ๋ฐ์ดํฐ ํ์ |
๋ค์ํ๊ฒ ์ง์ํ์ง๋ง Parquetํ์์ด ์ ์ผ |
์ค์ ๋ก ์ค์นํด๋ณด๋
Hive Metastore๊ฐ ์คํ๋์ด ์์ง ์์ผ๋ฉด Impala๋ ์คํํ ์ ์๋ค.
Metastore๋ฅผ ๊ณต์ ํด์ ์ฐ๋๊ฑฐ ๊ฐ์๋ฐ ๋ ์ฐพ์๋ด์ผํ ๋ฏ..
์ ํฌ๋ธ ์ฃผ์ - https://www.youtube.com/watch?v=vmiWOlcnFW8
728x90
๋ฐ์ํ
'BIGDATA > ํ๋ก์์ฝ์์คํ ' ์นดํ ๊ณ ๋ฆฌ์ ๋ค๋ฅธ ๊ธ
Hadoop HA ์คํ (0) | 2022.05.25 |
---|---|
[Hue] Hue 4.10.0 ์ค์น ๊ฐ์ด๋ (1) | 2022.05.13 |
[kudu] kudu cluster๋ชจ๋๋ก ์คํ (0) | 2022.03.29 |
[airflow] airflow ์ค์น ํ ์คํ (0) | 2022.03.23 |
[Hive] ์ด๊ธฐ ๋ฐ์ดํฐ๋ฒ ์ด์ค ์ฐ๋ ํ ์๊ธฐ๋ ํ ์ด๋ธ ๋ชฉ๋ก (0) | 2022.03.04 |