์ผ | ์ | ํ | ์ | ๋ชฉ | ๊ธ | ํ |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
- aws ccp
- ๋ฆฟ์ฝ๋
- ์ค์๋ธ ์ค์น
- ํ๋ก์ค์น
- CLF-C02
- rpmbuild
- ๋น ๋ฐ์ดํฐ
- ์๋ผ์คํฑ์์น
- ํด ์ค์น
- ์ฑ๊ธ์๋ฒ
- ๋ฐ์ดํฐ๋ถ์์ค์ ๋ฌธ๊ฐ
- ํ๋ก
- HBase
- ์คํํฌ
- Apache spark
- elastic stack
- ์ค์นผ๋ผ ๋ถ
- ansible
- ๋ฆฌ๋ ์ค
- ํ์ด๋ธ
- airflow
- ์ค์๋ธ
- ์ํ์น ์คํํฌ
- kudu
- BIGDATA
- ํ๋ก์์ฝ์์คํ
- ๋ฆฌ๋ ์ค RPM
- LeetCode
- hadoop
- standalone
- Today
- Total
๋ชฉ๋กCLOUD/AWS (23)
data_lab
๋๋ณด๊ธฐ 1.1: ๋ฐ์ดํฐ ์์ง์ ์ํํฉ๋๋ค. ๊ด๋ จ ์ง์: โข ๋ฐ์ดํฐ๋ฅผ ์์งํ๋ AWS ์๋น์ค์ ์ฒ๋ฆฌ๋ ๋ฐ ์ง์ฐ ์๊ฐ ํน์ฑ โข ๋ฐ์ดํฐ ์์ง ํจํด(์: ๋น๋ ๋ฐ ๋ฐ์ดํฐ ๊ธฐ๋ก) โข ์คํธ๋ฆฌ๋ฐ ๋ฐ์ดํฐ ์์ง โข ๋ฐฐ์น ๋ฐ์ดํฐ ์์ง(์: ์์ฝ๋ ์์ง, ์ด๋ฒคํธ ๊ธฐ๋ฐ ์์ง) โข ๋ฐ์ดํฐ ์์ง ํ์ดํ๋ผ์ธ์ ๋ฐ๋ณต ์ฌ์ ๊ฐ๋ฅ์ฑ โข ์คํ ์ดํธํ ๋ฐ ์คํ ์ดํธ๋ฆฌ์ค ๋ฐ์ดํฐ ํธ๋์ญ์ ์คํธ๋ฆฌ๋ฐ ์์ค์์ ๋ฐ์ดํฐ ์ฝ๊ธฐ ์ค์๊ฐ ๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ ? https://aws.amazon.com/ko/what-is/real-time-data-streaming/ ์ค์๊ฐ ๋ฐ์ดํฐ ์คํธ๋ฆฌ๋ฐ์ ๋ค์ํ ๋ฐ์ดํฐ ์์ค์์ ์ผ๋ จ์ ๋ฐ์ดํฐ๋ฅผ ์ทจํฉ ๋ฐ ์์งํ๊ณ ํด๋น ๋ฐ์ดํฐ๋ฅผ ์ค์๊ฐ์ผ๋ก ์ฒ๋ฆฌํ์ฌ ์๋ฏธ์ ์ธ์ฌ์ดํธ๋ฅผ ์ถ์ถํ๋ ๊ฒ์ ํฌํจ ์คํธ๋ฆฌ๋ฐ ๋ฐ์ดํฐ ? https://aws.am..
https://d1.awsstatic.com/ko_KR/training-and-certification/docs-data-engineer-associate/AWS-Certified-Data-Engineer-Associate_Exam-Guide.pdf ํฉ๊ฒฉ ์ ์ 720์ ์ํ์ ์ฝํ ์ธ ๋๋ฉ์ธ๊ณผ ๊ฐ์ค์น ๋๋ฉ์ธ 1: ๋ฐ์ดํฐ ์์ง ๋ฐ ๋ณํ (์ ์๊ฐ ๋งค๊ฒจ์ง ์ฝํ ์ธ ์ 34%) ๋๋ฉ์ธ 2: ๋ฐ์ดํฐ ์ ์ฅ์ ๊ด๋ฆฌ (์ ์๊ฐ ๋งค๊ฒจ์ง ์ฝํ ์ธ ์ 26%) ๋๋ฉ์ธ 3: ๋ฐ์ดํฐ ์ด์ ๋ฐ ์ง์ (์ ์๊ฐ ๋งค๊ฒจ์ง ์ฝํ ์ธ ์ 22%) ๋๋ฉ์ธ 4: ๋ฐ์ดํฐ ๋ณด์ ๋ฐ ๊ฑฐ๋ฒ๋์ค (์ ์ ๋งค๊ฒจ์ง ์ฝํ ์ธ ์ 18%)
AWS ํํธ๋ ๋คํธ์ํฌ - ํ์ฌ ์ปจ์คํดํธ AWS ์คํ ๋ฆฌ์ง ๊ฒ์ดํธ์จ์ด Amazon Route 53(DNS ์๋น์ค): ์ง์ฐ ์๊ฐ ๋ผ์ฐํ : ๋ ๋์ ์ฌ์ฉ์ ๊ฒฝํ์ ์ ๊ณตํ๊ธฐ ์ํด ๊ฐ์ฅ ๋ฎ์ ๋คํธ์ํฌ ์ง์ฐ ์๊ฐ์ ๊ธฐ์ค์ผ๋ก ํธ๋ํฝ์ ๋ผ์ฐํ ํ๋๋ก Route 53์ ๊ตฌ์ฑํ ์ ์์ต๋๋ค. AWS Global Accelerator: ์ด ์๋น์ค๋ ์ํ, ์ง์ญ ๋ฐ ๋ผ์ฐํ ์ ์ฑ ์ ๊ธฐ๋ฐ์ผ๋ก AWS ๊ธ๋ก๋ฒ ๋คํธ์ํฌ๋ฅผ ํตํ ํธ๋ํฝ์ ์ต์ ์ AWS ์๋ํฌ์ธํธ๋ก ์ ๋ฌ
AWS Aurora, AWS RDS - rdb Snowball Edge ๋ก์ปฌ ํ๊ฒฝ๊ณผ Amazon S3 ๊ฐ์ ๋ฐ์ดํฐ๋ฅผ ๊ฐ์ ธ์ค๊ฑฐ๋ ๋ด๋ณด๋ผ ์ ์์ผ๋ฉฐ, ์ธํฐ๋ท์ ์ฌ์ฉํ์ง ์๊ณ ๋ ํ๋ ์ด์์ ์ฅ์น๋ฅผ ์ฌ์ฉํ์ฌ ๋ฐ์ดํฐ๋ฅผ ๋ฌผ๋ฆฌ์ ์ผ๋ก ์ ์ก AWS ๋ง์ผํ๋ ์ด์ค - ์ํํธ์จ์ด ๊ตฌ๋งค Windows ํ์ผ ์๋ฒ์ฉ Amazon FSx๋ ์ ๊ณ ํ์ค SMB(์๋ฒ ๋ฉ์์ง ๋ธ๋ก) ํ๋กํ ์ฝ์ ํตํด ์ก์ธ์คํ ์ ์๋ ์์ ๊ด๋ฆฌํ, ์์ ์ฑ ๋ฐ ํ์ฅ์ฑ์ด ๋ฐ์ด๋ ํ์ผ ์คํ ๋ฆฌ์ง๋ฅผ ์ ๊ณต NAT ๊ฒ์ดํธ์จ์ด๋ฅผ ์ฌ์ฉํ๋ฉด ํ๋ผ์ด๋น ์๋ธ๋ท์ ์คํธ๋ฆฌ๋ฐ ์ธ์คํด์ค๋ฅผ ์ธํฐ๋ท์ด๋ ๋ค๋ฅธ AWS ์๋น์ค์ ์ฐ๊ฒฐํ ์ ์์ง๋ง ์ธํฐ๋ท์ด ํด๋น ์ธ์คํด์ค์์ ์ฐ๊ฒฐ์ ์์ํ๋ ๊ฒ์ ๋ฐฉ์ง
์ข ๋์ ๊ฐ๊ฒฉ ์ฑ ์ - ์จ๋๋งจ๋ AWS VPN, AWS Direct Connect - ์จํ๋ ๋ฏธ์ค ๋คํธ์ํฌ๋ฅผ VPC์ ์ฐ๊ฒฐํ ์ ์๊ฒ ํด์ฃผ๋ AWS ์๋น์ค Amazon DynamoDB - AWS ๊ด๋ฆฌํ NoSQL DB(key-value) ๊ณผ๊ฑฐ ํ์ฉ ํจํด์ ๋ฐํ์ผ๋ก Amazon EC2 ์ธ์คํด์ค ์ ํ์ ์ ํํฉ๋๋ค. C. Amazon S3 ์๋ช ์ฃผ๊ธฐ ์ ์ฑ ์ ์ฌ์ฉํ์ฌ ์ฌ์ฉ์๊ฐ ์์ฃผ ์ก์ธ์คํ์ง ์๋ ๊ฐ์ฒด๋ฅผ ์ ๋ ดํ ์คํ ๋ฆฌ์ง ๊ณ์ธต์ผ๋ก ์ด๋ํฉ๋๋ค. ๋ณด์ ๊ทธ๋ฃน - ๋ณด์ ๊ท์น ์ ์ฉ well architected ์์ ์ฑ ์์์ ๋ง์ถฐ ์๋์ผ๋ก ํ์ฅ ์๋์ผ๋ก ๋ณต๊ตฌ AWS ํด๋ผ์ฐ๋ํฌ๋ฉ์ด์ - ๋ฆฌ์์ค ๋ฐฐํฌ ํ ํ๋ฆฟ
Amazon Cognito saml2.0 ์ง์ ๋ฐ ํ์ฌ ๋น์ฆ๋์ค ์ ํ๋ฆฌ์ผ์ด์ ์ ๋ก๊ทธ์ธํ ์ ์๋๋ก ์ค์ ์ฌ์ฉ์ ํฌํธ AWS ์ํ ๋์๋ณด๋๋ ์ ์ง ๊ด๋ฆฌ ๋๋ ์ค๋จ๊ณผ ๊ฐ์ ์ด๋ฒคํธ๋ฅผ ๊ฒฝํํ๋ aws ์๋น์ค๋ฅผ ์๋ ค์ค VPC ํ๋ฆ ๋ก๊ทธ Amazon VPC์์ ์ธ๋ฐ์ด๋ ๋ฐ ์์๋ฐ์ด๋ ํธ๋ํฝ์ ๋ํ ์ ๋ณด๋ฅผ ์บก์ฒ AWS ๊ณต๋ ์ฑ ์ ๋ชจ๋ธ์ ๋ฐ๋ฅด๋ฉด ๊ณ ๊ฐ์ ๊ณ ๊ฐ๋ฐ์ดํฐ ๊ด๋ฆฌ AWS Artifact - ๊ท์ ๋ณด๊ณ ์ ๊ฒ์ ์๋ง์กด ์ธ์คํํฐ - ์ฌ์ ์ ์๋ ํ๊ฐ ํ ํ๋ฆฟ์ ์ฌ์ฉํ์ฌ Amazon EC2 ์ธ์คํด์ค์ ์ทจ์ฝ์ฑ์ ํ์ธ AWS ์ ํ๋ฆฌ์ผ์ด์ ๊ฒ์ ์๋น์ค - ํ์ฌ๋ ์จํ๋ ๋ฏธ์ค ์ธํ๋ผ์ ๋ํ ์ ๋ณด๋ฅผ ์์งํ๊ณ ์์ผ๋ฉฐ ํธ์คํธ ์ด๋ฆ, IP ์ฃผ์, MAC ์ฃผ์์ ๊ฐ์ ์ ๋ณด๊ฐ ํ์ AWS ๋ณด์ ๊ฐํ - ๋ฐ๋ณต์ ์ผ๋ก ์ก์ธ์ค ํค๋ฅผ ๊ต์ฒด AWS ํด๋ผ..
IAM ๋ฃจํธ ๊ณ์ - MFA ์ฌ์ฉ ๋ก๊ทธ์ธ - ์ผ์์ ์ธ ๊ฒ์ ๊ด๋ฆฌ์ ๊ถํ์๋ IAM ์ฌ์ฉ์ ์์ฑ amazon RDS ๋ค์ค AZ ๋ฐฐํฌ์์ Amazon RDS๋ ์๋์ผ๋ก ๊ธฐ๋ณธ ๋ฐ์ดํฐ๋ฒ ์ด์ค(DB) ์ธ์คํด์ค๋ฅผ ์์ฑํ๊ณ ๋ฐ์ดํฐ๋ฅผ ๋ค๋ฅธ AZ์ ์ธ์คํด์ค์ ๋๊ธฐ์์ผ๋ก ๋ณต์ ์์ฝ์ธ์คํด์ค๊ฐ ์ ์ผ ๋น์ฉ ์ ๋ ดํจ ๋ฐ์ดํฐ๋ณด์์ ๊ณ ๊ฐ(a company)์๊ฒ ์์ AWS Well-Architected ์ปดํจํ ๋ฆฌ์์ค ๋์ ํ ๋น - ์ ๋ขฐ์ฑ IAM ์ก์ธ์ค ๋ถ์๊ธฐ - AWS ์๋น์ค์ ์ ๊ทผ ํ๋ ๋ค๋ฅธ AWS ๊ณ์ ํ์ Amazon Quicksight - ๋ํํ ๋น์ฆ๋์ค ์ธํ ๋ฆฌ์ ์ค ๋์๋ณด๋๋ฅผ ๊ตฌ์ถ Resource elasticity - ์์์ ๋ฐ๋ผ ์ธํ๋ผ๋ฅผ ํ์ฅํ ์ ์๋ ์ฌ์ฉ์์ ๋ฅ๋ ฅ IAM Role ์ค์ - S3 ๋ฏผ๊ฐํ ๋ฐ์ดํฐ์ ์ก์ธ์ค AW..
150 consists of one or more data centers- Availability Zone 151 AWS ์ค๋ ธ์ฐ๋ชจ๋น- 50ํํ๋ฐ์ดํธ์ ํ์ผ ์คํ ๋ฆฌ์ง ๋ฐ์ดํฐ๋ฅผ AWS๋ก ๋ง์ด๊ทธ๋ ์ด์ 152 Amazon AppStream 2.0์ ๋๋ค. Amazon AppStream 2.0์ ๊ธฐ์ ์ด ๊ฒฝ๋ ๋ ธํธ๋ถ์ ํฌํจํ ๋ชจ๋ ์ฅ์น์ ์ ํ๋ฆฌ์ผ์ด์ ๊ณผ ๋ฐ์คํฌํฑ์ ๋ฐฐํฌํ ์ ์๊ฒ ํด์ฃผ๋ ํด๋ผ์ฐ๋ ๊ธฐ๋ฐ ๋ฐ์คํฌํฑ ์คํธ๋ฆฌ๋ฐ ์๋น์ค 153 154 ์ํฌ๋ก๋๋ฅผ ๋ถํ ํ์ฌ ๋ชจ๋๋ฆฌ์ ์ํคํ ์ฒ๋ฅผ ํผํ์ญ์์ค 155 AWS ํด๋ผ์ฐ๋ํธ๋ ์ผ 156 ๊ณ ๊ฐ์ฑ ์ - ๊ฒ์คํธ ์ด์ ์ฒด์ ๊ด๋ฆฌ 157 158 AWS Secrets Manager 159 ์๋ง์กด ๋ฉ์ด์
140 141 ๋น์ฉ์๋ -AWS Budgets 142 https://docs.aws.amazon.com/whitepapers/latest/overview-aws-cloud-adoption-framework/governance-perspective.html WS CAF governance perspective capability - Benefit Management 143 S3 Transfer Acceleration - ๋น ๋ฅด๊ณ ์์ ํ๊ฒ ํ์ผ ์ ์ก 144 ์ง์์ ์ผ๋ก ์คํ - ์จ๋๋งจ๋ ์ธ์คํด์ค 145 AWS CAF(AWS Cloud Adoption Framework)์ ์ด๋ค ํด๋ผ์ฐ๋ ์ ํ ์ฌ์ ๋จ๊ณ์์ ํด๋ผ์ฐ๋๊ฐ ๋น์ฆ๋์ค ์ฑ๊ณผ๋ฅผ ๊ฐ์ํ Envision (๊ตฌ์) 146 AWS ๊ณต๋ ์ฑ ์ ๋ชจ๋ธ์์ ๊ณ ๊ฐ ์ฑ ์ - ..
130 AWS ๊ณต๋์ฑ ์ ๊ณ ๊ฐ - ํจ์น ๊ด๋ฆฌ 131 ๊ณผ๊ธ ๋ถ๋ฆฌ - Consolidated billing, Multiple AWS accounts 132 AWS ์ฑ ์ Nitro ํ์ดํผ๋ฐ์ด์ ์ ์ ๋ฐ์ดํธ๋ฅผ ์ ์ฉ 133 AWS ์ปดํจํ ์ฅ์ - Pay-as-you-go pricing (์ข ๋์ ๊ฐ๊ฒฉ) 134 https://docs.aws.amazon.com/whitepapers/latest/aws-caf-business-perspective/aws-caf-business-perspective.html AWS CAF - ๋น์ฆ๋์ค ๊ด์ : ๋ฐ์ดํฐ ์์ตํ 135 AWS Enterprise Support - ๋ชจ๋ํฐ๋ง ๋ฐ ์ต์ ํ๋ฅผ ์ง์ํ๋ ์ง์ ๋ ๊ธฐ์ ๊ณ์ ๊ด๋ฆฌ์(TAM) 136 ์ฉ๋์ ์ผ์์ ์ผ๋ก ์ฌ์ฉํ ์ ์๊ฒ ๋๋ฉด ์ด๋ค ..