AWS EMR Series – Apache Superset으로 presto 쿼리 결과 시각화
여기서 다루는 내용 · 간단 소개 · 사전 준비 · 연동 확인 · 마무리 이번 시간에는 BI Tool인 Apache Superset을 사용하여 AWS EMR 클러스터의 presto를 연동하여 데이터를 시각화를 간단히 해보도록 하겠습니다. Apache Superset은 Python으로 만들어진 응용 프로그램 프레임워크인 Flask로 만들어졌습니다. Cloud-native하고, Airbnb에서 아래와 같이 사용중이라 하니 검토해볼만 합니다. “Superset is battle tested in large environments with hundreds of concurrent...
AWS EMR Series – Hive geospatial 데이터 조회
여기서 다루는 내용 · 간단 소개 · 사전 준비 · Hive UDF 등록 및 geospatial 데이터 조회 · 마무리 이번 시간에는 EMR 클러스터에서 Hive에서 지리 공간 데이터를 조회하도록 하겠습니다. Hive에서는 자체적으로 geospatial 을 지원하지 않으므로 ESRI에서 제공하는 spatial-framework-for-hadoop 을 사용하여 Hive UDF 생성 및 활용하는 방식으로 진행합니다. 간단 소개 AWS EMR 관리형 하둡 클러스터 플랫폼 Apache Spark, HBase, Presto, Hive와 같이 널리...
![[Re18특집] Amazon DynamoDB Transaction 지원과 On-demand Capacity 업데이트](https://media.blog.wisen.co.kr/wp-content/uploads/2018/12/06112547/reinvent2018.jpg)
[Re18특집] Amazon DynamoDB Transaction 지원과 On-demand Capacity 업데이트
여기서 다루는 내용 · Intro · Transaction 기능 소개 및 간단 확인 · On-demand 옵션 소개 및 간단 확인 · 마무리 Intro 이번 Re:Invent 2018 에서 Amazon DynamoDB의 Transaction 지원 기능과 On-demand Capacity 모드가 업데이트 되었습니다. 트랜잭션이 필요한 비지니스 로직 구현이 가능해졌고, On-demand 옵션으로 용량 산정 및 관리의 부담을 줄일 수 있게 되었습니다. 이번 포스팅에서는 해당 업데이트 주요 내용과...
[Re18특집] Amazon Cloud Map 서비스 출시
여기서 다루는 내용 · Intro · 서비스 간단 소개 · 리소스 등록 및 검색 확인 · 마무리 Intro 이번 Re:Invent 2018 에서 Amazon Cloud Map 서비스가 출시되었습니다. Amazon Cloud Map 서비스를 통해서 클라우드 리소스를 논리적 이름으로 매핑하고 이를 검색 및 필터링 할 수 있습니다. 이번 포스팅에서는 해당 서비스 간단 소개 및 확인을 해보겠습니다. 서비스 간단 소개 :: 서비스 주요...
[Re18특집] Amazon Aurora Global Database 기능 출시
여기서 다루는 내용 · Intro · 업데이트 간단 소개 · 클러스터 생성 및 복제 간단 확인 · 마무리 Intro 이번 Re:Invent 2018 에서 Amazon Aurora Global Database의 기능이 출시되었습니다. 해당 기능으로 지역간 Aurora DB 재해복구(DR)가 쉬워졌습니다. 이번 포스팅에서는 업데이트 주요 내용과 기능을 확인 해보겠습니다. ※ 서울 리전 미지원 => 지원 리전 : 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국...
최신 댓글