本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
的核心概念和術語AWS Glue DataBrew
您可以在下面找到核心概念和術語的概觀AWS Glue DataBrew。閱讀本節後,請參閱 入門AWS Glue DataBrew,其中會逐步引導您建立專案、連接資料集和執行任務的程序。
專案
DataBrew 中的互動式資料準備工作區稱為專案。使用資料專案,您可以管理相關項目的集合:資料、轉換和排程程序。在建立專案的過程中,您可以選擇或建立要處理的資料集。接著,您可以建立配方,這是您希望 DataBrew 採取行動的一組指示或步驟。這些動作會將原始資料轉換為可供資料管道使用的形式。
資料集
資料集僅代表一組資料,即分為資料欄或欄位的資料列或記錄。當您建立 DataBrew 專案時,您可以連線到或上傳要轉換或準備的資料。DataBrew 可以處理來自任何來源、從格式化檔案匯入的資料,並直接連接到不斷增長的資料存放區清單。
對於 DataBrew,資料集是資料的唯讀連線。DataBrew 會收集一組描述性中繼資料來參考資料。DataBrew 無法更改或存放實際資料。為了簡化,我們使用資料集來參考 DataBrew 使用的實際資料集和中繼資料。
Recipe
在 DataBrew 中,配方是一組指示或步驟,用於您希望 DataBrew 採取行動的資料。配方可以包含許多步驟,而每個步驟可以包含許多動作。您可以使用工具列上的轉換工具來設定要對資料進行的所有變更。稍後,當您準備好查看配方的成品時,請將此任務指派給 DataBrew 並進行排程。DataBrew 會儲存有關資料轉換的指示,但不會儲存您的任何實際資料。您可以在其他專案中下載和重複使用配方。您也可以發佈多個版本的配方。
任務
DataBrew 會執行您在建立配方時設定的指示,以執行轉換資料的任務。執行這些指示的程序稱為任務。任務可以根據預設排程,將您的資料配方付諸行動。但您不會受限於排程。您也可以隨需執行任務。如果您想要分析一些資料,則不需要配方。在這種情況下,您可以直接設定設定檔任務來建立資料設定檔。
資料沿襲
DataBrew 會在視覺化界面中追蹤您的資料,以判斷其原始伺服器,稱為資料歷程。此檢視顯示資料如何流經來自原始來源的不同實體。您可以看到其原始伺服器、受到其影響的其他實體、隨著時間的推移發生了什麼情況,以及存放的位置。
資料設定檔
當您描述資料時,DataBrew 會建立名為資料描述檔的報告。此摘要會告訴您資料的現有形狀,包括內容的內容、資料結構及其關係。您可以執行資料設定檔任務,為任何資料集建立資料設定檔。