服务详情

AWS Glue 是一项无服务器数据集成服务，可让数据准备更简单、更快、更便宜。您可以发现并连接到 70 多个不同的数据来源，在集中式数据目录中管理您的数据，并以可视化方式创建、运行和监控 ETL 管道以将数据加载到数据湖中。

服务特点

1. AWS Glue 可以在新数据到达时运行您的提取、转换、加载（ETL）作业。例如，您可以将 AWS Glue 配置为在 Amazon Simple Storage Service（S3）中有新数据可用时立即启动 ETL 作业以运行。
2. 您可以使用数据目录快速发现和搜索多个AWS数据集，而无需移动数据。数据存入目录后，您可立即使用 Amazon Athena、Amazon EMR 和 Amazon Redshift Spectrum 对其进行搜索和查询。
3. AWS Glue 数据质量可自动创建、管理和监控数据质量规则，以帮助确保跨数据湖和管道的高质量数据。

使用案列

1. 高效发现数据:快速识别跨AWS、本地和其他云的数据，然后使其立即可用于查询和转换
2. 交互式探索、处理数据以及对其进行实验:使用AWS Glue交互式会话，数据工程师可以使用他们选择的集成开发环境(IDE)或笔记本交互式地探索和准备数据。
3. 简化ETL管道开发:通过自动配置和工作者管理删除基础设施管理，并将所有数据集成需求整合到单个服务中。
4. 支持各种处理框架和工作负载:更容易支持各种数据处理框架，如ETL和ELT，以及各种工作负载，包括批处理、微批处理和流处理。

 

由服务使用方的应用程序发起，以Restful风格为主、通过公网HTTP协议调用AWS Glue(数据融合加密)，从而实现程序的自动化交互，提高服务效率。

AWS 云计算

API接口列表

AWS 云计算