DEA 001 - 009

001 AWS Glue

https://repost.aws/knowledge-center/glue-s3-endpoint-validation-failed

데이터 엔지니어가 Amazon S3 버킷에서 데이터를 읽도록 AWS Glue 작업을 구성하고 있습니다.

데이터 엔지니어는 필요한 AWS Glue 연결 세부 정보와 관련 IAM 역할을 설정했습니다.

그러나 데이터 엔지니어가 AWS Glue 작업을 실행하려고 하면 데이터 엔지니어는 Amazon S3 VPC 게이트웨이 엔드포인트에 문제가 있음을 나타내는 오류 메시지를 수신합니다.
데이터 엔지니어는 오류를 해결하고 AWS Glue 작업을 S3 버킷에 연결해야 합니다.
이 요구 사항을 충족하는 솔루션은 무엇입니까?

 

VPC의 라우팅 테이블에 Amazon S3 VPC 게이트웨이 엔드포인트에 대한 인바운드 및 아웃바운드 경로가 포함되어 있는지 확인합니다.

 

VPC 자체 오류임

AWS Glue > 서버리스 서비스 이므로 보안 그룹 없음

S3는 항상 FQDN

 

002 AWS Lake Formation

소매 회사에는 Amazon S3 버킷에 고객 데이터 허브가 있습니다.

여러 국가의 직원들이 데이터 허브를 사용하여 전사적 분석을 지원합니다.

거버넌스 팀은 회사의 데이터 분석가가 분석가와 동일한 국가에 있는 고객의 데이터에만 액세스할 수 있도록 해야 합니다.
최소한의 운영 노력으로 이러한 요구 사항을 충족할 수 있는 솔루션은 무엇입니까?

 

S3 버킷을 AWS Lake Formation의 데이터 레이크 위치로 등록합니다. Lake Formation 행 수준 보안 기능을 사용하여 회사의 액세스 정책을 시행하십시오

> 각 고객과 관련된 국가 등 특정 조건을 기반으로 데이터에 대한 액세스를 제한하는 정책을 시행할 수 있습니다.

 

003

한 미디어 회사에서는 사용자 행동과 선호도에 따라 고객에게 미디어 콘텐츠를 추천하는 시스템을 개선하려고 합니다.

추천 시스템을 개선하려면 회사는 타사 데이터 세트의 통찰력을 회사의 기존 분석 플랫폼에 통합해야 합니다.
회사는 타사 데이터 세트를 통합하는 데 필요한 노력과 시간을 최소화하려고 합니다.
최소한의 운영 오버헤드로 이러한 요구 사항을 충족하는 솔루션은 무엇입니까?