AWS EMR Series – Multi-master 기능 간단 확인
여기서 다루는 내용 · 간단 소개 · Multi-master cluster 생성 · Multi-master 확인 · 마무리 이번 시간에는 EMR의 multi-master 기능을 확인해 보겠습니다. AWS EMR Release Notes에 5.23.0 버전부터 마스터 노드의 HA를 위해 3개의 마스터 노드를 지원하도록 New Feature가 생겼습니다. 자세한 내용은 아래와 같으며, 간단한 테스트를 해보겠습니다. https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-release-5x.html#emr-5230-relnotes 간단 소개 AWS EMR 관리형 하둡 클러스터 플랫폼 Apache Spark, HBase, Presto,...
AWS MSK open preview 간단 소개
여기서 다루는 내용 · 간단 소개 · MSK 생성 및 확인 · MSK 모니터링 · 마무리 이번 시간에는 최근 도쿄 리전에 출시된 AWS MSK를 간단 확인 해보도록 하겠습니다. 아직 아직 평가 버전이며, 서울 리전은 미출시입니다. (2019-04-25 기준) 간단 소개 AWS MSK 서버리스 기반 완전 관리형 서비스 Apache Kafka 인프라 관리에 관한 부담 감소 코드 변경 없이 기존 애플리케이션 마이그레이션 가능...
AWS Athena workgroup 기능 출시
여기서 다루는 내용 · 간단 소개 · Workgorup 생성 및 Usage Control 설정 · Workgroup Data Limit 테스트 · 마무리 이번 시간에는 최근 출시된 AWS Athena workgroup 기능을 간단 테스트 해보도록 하겠습니다. 간단 소개 AWS Athena 서버리스 기반 완전 관리형 서비스 Presto 기반 표준 SQL 지원 대화식 쿼리 서비스 Amazon S3 기반 데이터 스토어 AWS Management Console, API, ODBC/JDBC...
6하 원칙으로 알아보는 AWS 환경에서의 태그 전략
여기서 다루는 내용 · 시작 · Why – 태깅은 왜 하지? · What – 무엇에 태깅하지? · When – 태깅은 언제 하지? · Where – 태깅은 어디에서 하지? · How – 태깅전략은 어떻게 하지? · Who – 태깅은 누가 관리하지? · 마치며 시작 안녕하십니까, GS네오텍 최준승입니다. 오늘은 이전과 좀 다른 형식으로 글을 써보려고 합니다. 이곳은 일종의 기술 블로그(?)다보니. 대부분...
Apache Superset으로 Athena 쿼리 결과 시각화
여기서 다루는 내용 · 간단 소개 · 사전 준비 · 연동 확인 · 마무리 이번 시간에는 대규모 분산환경에서 수평 확장 가능한 오픈소스인 Apache Superset으로 presto 엔진을 기반으로 하는 AWS Athena의 쿼리 결과를 시각화 해보도록 하겠습니다. 먼저 Superset을 준비하고, 샘플 데이터를 AWS Glue data catalog에 등록한뒤 이를 AWS Athena와 연동하여 간단한 시각화를 해보겠습니다. 간단 소개 AWS Athena 서버리스 기반 완전...
최신 댓글