AWS Glue 出題頻度 ⭐⭐⭐⭐

AWS Glue

AWS Glue

analyticsAWS GlueAWS
最終整理

サーバーレスのデータ統合サービスで、Data Catalog がデータを記述し、Glue ETL がデータを整形・変換します。

基本情報

項目内容
英語名AWS Glue
正式名称AWS Glue
中国語の説明无服务器数据集成与 ETL
日本語の説明サーバーレス ETL
出題頻度⭐⭐⭐⭐
混同しやすいものEMR / Data Pipeline

一言で理解

サーバーレスのデータ統合サービスで、Data Catalog がデータを記述し、Glue ETL がデータを整形・変換します。

要点

  • Crawler がデータソースを調査してスキーマを推論し、Data Catalog が場所・形式・列・型などのメタデータを保存します。
  • Glue ETL はデータを抽出・変換・ロードし、Athena、Redshift、ML 向けに準備します。
  • Catalog は主要な業務データを保存せず、実データは通常 S3 などにあります。

試験ポイント

  • 「メタデータ・スキーマ・データカタログ」は Glue Data Catalog です。
  • 「Serverless ETL・データ変換」は Glue、Spark/Hadoop を細かく制御するなら EMR を比較します。

よくある誤解

  • 製品名だけで選ばず、データ型、遅延、制御性、運用、コスト制約を確認します。

重要ポイント

Catalog は目録、ETL は加工工場。