AWS Glue는 서버리스 데이터 통합 서비스로, 분석, 머신러닝(ML), 애플리케이션 개발을 위해 여러 소스에서 데이터를 쉽게 발견, 준비, 이동, 통합할 수 있게 해줍니다. 이 저장소에는 AWS Glue 서비스의 다양한 측면과 다양한 AWS Glue 유틸리티를 시연한 샘플이 포함되어 있습니다.

AWS Glue의 오픈소스 Python 라이브러리는 별도의 저장소에서 찾을 수 있습니다: awslabs/aws-glue-libs.

시작하기

• AWS Glue 시작

AWS Glue 사용을 시작하는 데 도움이 됩니다.

• 자주 묻는 질문 및 사용법

AWS Glue의 다양한 ETL 기능을 시작하는 데 도움을 주고, 사람들이 자주 묻는 질문들에 답해줍니다.

워크숍

• AWS 글루 학습 시리즈

이 포괄적인 시리즈에서는 Glue의 기본부터 고급 최적화 기법까지 모든 것을 배울 수 있습니다.

튜토리얼

장군

• Spark 스크립트용 AWS Glue 작성

AWS Glue 스크립트 작성 과정을 소개합니다.

• AWS Glue Studio를 이용한 민감한 데이터 탐지 및 처리

AWS Glue 작업을 통해 행 단위로 민감한 데이터를 식별하고, 케이스별 개체를 식별하는 맞춤형 식별 패턴을 만드는 방법을 안내합니다.

AWS Glue Samples

AWS Glue is a serverless data integration service that makes it easier to discover, prepare, move, and integrate data from multiple sources for analytics, machine learning (ML), and application development. This repository has samples that demonstrate various aspects of the AWS Glue service, as well as various AWS Glue utilities.

You can find the AWS Glue open-source Python libraries in a separate repository at: awslabs/aws-glue-libs.

Getting Started

• Getting Started with AWS Glue

  Helps you get started using AWS Glue.

• FAQ and How-to

  Helps you get started using the many ETL capabilities of AWS Glue, and answers some of the more common questions people have.

Workshops

• AWS Glue Learning Series

  In this comprehensive series, you’ll learn everything from the basics of Glue to advanced optimization techniques.

Tutorials

General

• Writing an AWS Glue for Spark script

  Introduces the process of writing AWS Glue scripts.

• Detect and process sensitive data using AWS Glue Studio

  Guides you to create an AWS Glue job that identifies sensitive data at the row level, and create a custom identification pattern to identify case-specific entities.

• Enable self-service visual data integration and analysis for fund performance using AWS Glue Studio and Amazon QuickSight

  Demonstrates how AWS Glue Studio helps you perform near-real-time analytics, and how to build visualizations and quickly get business insights using Amazon QuickSight.

• Stream data from relational databases to Amazon Redshift with upserts using AWS Glue streaming jobs

  Guides you to setup Change data capture (CDC) from relational databases to Amazon Redshift with enriching data using Glue Streaming job.

• AWS Glue streaming application to process Amazon MSK data using AWS Glue Schema Registry

  Shows how to use a combination of Amazon MSK, the AWS Glue Schema Registry, AWS Glue streaming ETL jobs, and Amazon S3 to create a robust and reliable real-time data processing platform.

Data migration