AWS Glueはサーバーレスのデータ統合サービスであり、分析、機械学習(ML)、アプリケーション開発のために複数のソースからデータを発見、準備、移動、統合を簡単にします。 このリポジトリには、AWS Glueサービスのさまざまな側面やさまざまなAWS Glueユーティリティのサンプルが含まれています。

AWS GlueのオープンソースPythonライブラリは別のリポジトリで見つけられます:awslabs/aws-glue-libs。

始めて

• AWS Glueの入門

AWS Glueの使い始めに役立ちます。

• よくある質問とハウツー

AWS Glueの多くのETL機能を使い始めるのを助け、よくある質問にも答えています。

ワークショップ

• AWS Glue学習シリーズ

この包括的なシリーズでは、Glueの基本から高度な最適化技術まで、あらゆることを学べます。

チュートリアル

将軍

• Spark用のAWS Glueスクリプトの作成

AWS Glueスクリプトの作成プロセスを紹介します。

• AWS Glue Studioを用いて機密データを検出・処理

AWS Glueジョブを作成して行レベルで機密データを識別し、ケース固有のエンティティを特定するカスタム識別パターンを作成する方法を案内します。

AWS Glue Samples

AWS Glue is a serverless data integration service that makes it easier to discover, prepare, move, and integrate data from multiple sources for analytics, machine learning (ML), and application development. This repository has samples that demonstrate various aspects of the AWS Glue service, as well as various AWS Glue utilities.

You can find the AWS Glue open-source Python libraries in a separate repository at: awslabs/aws-glue-libs.

Getting Started

• Getting Started with AWS Glue

  Helps you get started using AWS Glue.

• FAQ and How-to

  Helps you get started using the many ETL capabilities of AWS Glue, and answers some of the more common questions people have.

Workshops

• AWS Glue Learning Series

  In this comprehensive series, you’ll learn everything from the basics of Glue to advanced optimization techniques.

Tutorials

General

• Writing an AWS Glue for Spark script

  Introduces the process of writing AWS Glue scripts.

• Detect and process sensitive data using AWS Glue Studio

  Guides you to create an AWS Glue job that identifies sensitive data at the row level, and create a custom identification pattern to identify case-specific entities.

• Enable self-service visual data integration and analysis for fund performance using AWS Glue Studio and Amazon QuickSight

  Demonstrates how AWS Glue Studio helps you perform near-real-time analytics, and how to build visualizations and quickly get business insights using Amazon QuickSight.

• Stream data from relational databases to Amazon Redshift with upserts using AWS Glue streaming jobs

  Guides you to setup Change data capture (CDC) from relational databases to Amazon Redshift with enriching data using Glue Streaming job.

• AWS Glue streaming application to process Amazon MSK data using AWS Glue Schema Registry

  Shows how to use a combination of Amazon MSK, the AWS Glue Schema Registry, AWS Glue streaming ETL jobs, and Amazon S3 to create a robust and reliable real-time data processing platform.

Data migration