BLOG

[re:Invent 2018] Building Serverless Analytics Pipelines with AWS Glue
작성일: 2018-11-27

* 세션명 : ANT308 – Building Serverless Analytics Pipelines with AWS Glue
* 일자 : 2018/11/26 14:30~15:30
* 장소 : Aria West, Level 3, Ironwood 5

 

관리형 ETL 서비스인 AWS Glue에 대한 주요 기능 소개 세션으로 AWS Glue에 대한 전반 적인 설명 과 성능 향상, 신규 기능에 대해 간략한 설명으로 진행 되었습니다.
그동안 문제시 되면 Crawlers 와 ETL Jobs에 대한 퍼포먼스 향상. Glue모니터링을 위한 ETL metrics 제공 기능 추가, 신규 Job Type으로 Python Shell 제공하는 부분이 소개 되었습니다.

세션 소개 내용에는 고객사 사례 와 효율적인 파이프라인 구축 방안에 대한 부분이었으며, Glue의 New Feature 에 포커스가 맞춰 있어 다소 아쉬웠습니다.