服務(wù)詳情

AWS Glue 是一項(xiàng)無(wú)服務(wù)器數(shù)據(jù)集成服務(wù)，可讓數(shù)據(jù)準(zhǔn)備更簡(jiǎn)單、更快、更便宜。您可以發(fā)現(xiàn)并連接到 70 多個(gè)不同的數(shù)據(jù)來(lái)源，在集中式數(shù)據(jù)目錄中管理您的數(shù)據(jù)，并以可視化方式創(chuàng)建、運(yùn)行和監(jiān)控 ETL 管道以將數(shù)據(jù)加載到數(shù)據(jù)湖中。

服務(wù)特點(diǎn)

1. AWS Glue 可以在新數(shù)據(jù)到達(dá)時(shí)運(yùn)行您的提取、轉(zhuǎn)換、加載（ETL）作業(yè)。例如，您可以將 AWS Glue 配置為在 Amazon Simple Storage Service（S3）中有新數(shù)據(jù)可用時(shí)立即啟動(dòng) ETL 作業(yè)以運(yùn)行。
2. 您可以使用數(shù)據(jù)目錄快速發(fā)現(xiàn)和搜索多個(gè)AWS數(shù)據(jù)集，而無(wú)需移動(dòng)數(shù)據(jù)。數(shù)據(jù)存入目錄后，您可立即使用 Amazon Athena、Amazon EMR 和 Amazon Redshift Spectrum 對(duì)其進(jìn)行搜索和查詢。
3. AWS Glue 數(shù)據(jù)質(zhì)量可自動(dòng)創(chuàng)建、管理和監(jiān)控?cái)?shù)據(jù)質(zhì)量規(guī)則，以幫助確保跨數(shù)據(jù)湖和管道的高質(zhì)量數(shù)據(jù)。

使用案列

1. 高效發(fā)現(xiàn)數(shù)據(jù):快速識(shí)別跨AWS、本地和其他云的數(shù)據(jù)，然后使其立即可用于查詢和轉(zhuǎn)換
2. 交互式探索、處理數(shù)據(jù)以及對(duì)其進(jìn)行實(shí)驗(yàn):使用AWS Glue交互式會(huì)話，數(shù)據(jù)工程師可以使用他們選擇的集成開(kāi)發(fā)環(huán)境(IDE)或筆記本交互式地探索和準(zhǔn)備數(shù)據(jù)。
3. 簡(jiǎn)化ETL管道開(kāi)發(fā):通過(guò)自動(dòng)配置和工作者管理刪除基礎(chǔ)設(shè)施管理，并將所有數(shù)據(jù)集成需求整合到單個(gè)服務(wù)中。
4. 支持各種處理框架和工作負(fù)載:更容易支持各種數(shù)據(jù)處理框架，如ETL和ELT，以及各種工作負(fù)載，包括批處理、微批處理和流處理。

 

由服務(wù)使用方的應(yīng)用程序發(fā)起，以Restful風(fēng)格為主、通過(guò)公網(wǎng)HTTP協(xié)議調(diào)用AWS Glue(數(shù)據(jù)融合加密) ，從而實(shí)現(xiàn)程序的自動(dòng)化交互，提高服務(wù)效率。