![[Re18특집] AWS Step Functions에 관리 서비스들 통합](https://media.blog.wisen.co.kr/wp-content/uploads/2018/12/06112547/reinvent2018.jpg)
[Re18특집] AWS Step Functions에 관리 서비스들 통합
여기서 다루는 내용 · Intro · 업데이트 주요 내용 · AWS DynamoDB integration 확인 · Amazon SNS integration 확인 · Amazon SQS integration 확인 · AWS Glue integration 확인 · AWS Batch integration 확인 · Amazon ECS/Fargate integration 확인 · 마무리 Intro 이번 Re:Invent 2018 에서 AWS Step Functions의 기능이 업데이트되었습니다. 기존에는 Lambda 위주의 조정 작업이었으나 여러 AWS 서비스들이 연계...
AWS EMR Kerberos 인증 간단 소개
여기서 다루는 내용 · 간단 소개 · EMR – Kerberos 인증 활성화 · Kerberos 인증 – 클러스터 전용 KDC 구성 · Kerberos 인증 – Cross-realm trust 구성 · 마무리 AWS EMR은 Hadoop 클러스터 리소스 및 데이터 보안을 위해 몇 가지 기능들을 제공합니다. 이번 시간에는 EMR 클러스터의 Kerberos 인증 기능을 간단하게 활성화하여 확인해보도록 하겠습니다. 간단 소개 AWS EMR 관리형 하둡...
AWS S3 Select 신규 기능 추가
여기서 다루는 내용 · 간단 소개 · Apache Parquet format 지원 · JSON Array 지원 · BZIP2으로 압축된 파일 지원 · 마무리 최근AWS에서 S3 Select의 추가 기능을 게시하였습니다. 추가된 기능은 Apache Parquet format 지원, JSON Arrays 지원 , BZIP2로 압축된 CSV와 JSON 객체 지원 입니다. (2018년 9월 14일 기준) 기존에는 CSV와 JSON 파일 형식만 읽을 수 있었지만 이제는 Parquet...
AWS EMR – JupyterHub 간단 사용기
여기서 다루는 내용 · 서비스 간단 소개 · EMR 생성 및 JupyterHub 접근 · Jupyter 확인 · 마무리 이제 Amazon EMR 릴리스 5.14.0에서 JupyterHub를 지원합니다. (2018/06/14 기준) 이번 시간에는 EMR에 추가된 JupyterHub 서비스를 간단하게 사용해보는 포스팅을 준비했습니다. 서비스 간단 소개 AWS EMR 관리형 하둡 클러스터 플랫폼 Apache Spark, HBase, Presto, Hive와 같이 널리 사용되는 분산 프레임워크를 실행 Amazon S3 및Amazon DynamoDB와...
AWS Glue 간단 사용기 – 3부
여기서 다루는 내용 · Data catalog – Athena 연동 및 확인 · Data catalog – EMR (spark/presto/hive) 연동 및 확인 · Data catalog – Redshift 연동 및 확인 · 마무리 AWS Glue 간단 사용기 – 1부 AWS Glue 간단 사용기 – 2부 AWS Glue 간단 사용기 – 3부 1부에서 MovieLens 에서 제공하는 오픈 데이터를 활용하여 간단하게 Glue Data catalog를...
최신 댓글