| ์ผ | ์ | ํ | ์ | ๋ชฉ | ๊ธ | ํ |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | |||
| 5 | 6 | 7 | 8 | 9 | 10 | 11 |
| 12 | 13 | 14 | 15 | 16 | 17 | 18 |
| 19 | 20 | 21 | 22 | 23 | 24 | 25 |
| 26 | 27 | 28 | 29 | 30 | 31 |
- elastic stack
- ์ํ์น ์คํํฌ
- Apache spark
- ์ค์นผ๋ผ ๋ถ
- ํด ์ค์น
- ํ๋ก์ค์น
- ๋ฆฌ๋ ์ค RPM
- kudu
- ๋ฆฟ์ฝ๋
- LeetCode
- standalone
- ๋น ๋ฐ์ดํฐ
- ์ค์๋ธ
- ์คํํฌ
- ๋ฆฌ๋ ์ค
- ์ฑ๊ธ์๋ฒ
- ๋ฐ์ดํฐ๋ถ์์ค์ ๋ฌธ๊ฐ
- aws ccp
- ansible
- HBase
- ํ์ด๋ธ
- hadoop
- rpmbuild
- BIGDATA
- ํ๋ก์์ฝ์์คํ
- airflow
- CLF-C02
- ์ค์๋ธ ์ค์น
- ํ๋ก
- ์๋ผ์คํฑ์์น
- Today
- Total
๋ชฉ๋กApache Avro (1)
data_lab
[ํ๋ก์์ฝ์์คํ
] Apache Avro / ์ํ์น ์์ด๋ธ๋ก
์ํ์น ์์ด๋ธ๋ก๋ ? - ํน์ ์ธ์ด์ ์ข ์๋์ง ์๋ ์ธ์ด ์ค๋ฆฝ์ ๋ฐ์ดํฐ ์ง๋ ฌํ ์์คํ - ํ๋ก Writable์ ์ฃผ์ ๋จ์ ์ธ ์ธ์ด ์ด์์ฑ ํด๊ฒฐ ์ํด ์๊ฒจ๋จ ์ํ์น ์ฐ๋ฆฌํํธ, ๊ตฌ๊ธ ํ๋กํ ์ฝ ๋ฒํผ์ ๋ค๋ฅธ ์ฐจ๋ณํ๋ ํน์ฑ๊ฐ์ง๊ณ ์์ ๋ฐ์ดํฐ๋ ๋ค๋ฅธ ์์คํ ๊ณผ ๋น์ทํ๊ฒ ์ธ์ด ๋ ๋ฆฝ ์คํค๋ง๋ก ๊ธฐ์ ๋จ ์์ด๋ธ๋ก์์ ์ฝ๋ ์์ฑ์ ์ ํ์ฌํญ์ ๋ฐ์ดํฐ๋ฅผ ์ฝ๊ณ ์ฐ๋ ์์ ์ ์คํค๋ง๋ ํญ์ ์กด์ฌํ๋ค ๊ฐ์ ํจ - ๋งค์ฐ ๊ฐ๊ฒฐํ ์ฝ๋ฉ์ด ๊ฐ๋ฅ ์คํค๋ง์ ์์ฑ JSON ๋ฐ์ดํฐ๋ ๋ฐ์ด๋๋ฆฌ ํฌ๋งท์ผ๋ก ์ธ์ฝ๋ฉ ์์ด๋ธ๋ก ๋ช ์ธ - ๋ชจ๋ ๊ตฌํ์ฒด๊ฐ ์ง์ํด์ผ ํ๋ ๋ฒ์ด๋๋ฆฌ ํฌ๋งท์ ๋ํ ์์ธํ ๋ด์ฉ API - ์์ด๋ธ๋ก ๋ช ์ธ์์ ๋น ์ ธ์๋ ๋ด์ฉ์. ๊ฐ ํน์ ์ธ์ด์ ๋ฐ๋ผ ๋ค๋ฅด๊ฒ ์์ฑ๋จ. ์ธ์ด์ ๋ฐ์ธ๋ฉ ํธ์์ฑ ๋์ด๊ณ ์ํธ์ด์์ฑ ์ ํ ๋ฌธ์ ํด๊ฒฐ๋จ ์คํค๋งํด์ - ์ ์คํ๊ฒ ์ ์๋..