本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
使用 Amazon EMR Serverless 連線至 DynamoDB
在本教學課程中,您將資料子集從美國地理名稱委員會
步驟 1:將資料上傳至 Amazon S3 儲存貯體
若要建立 Amazon S3 儲存貯體,請遵循 Amazon Simple Storage Service 主控台使用者指南 中的建立儲存貯體中的指示。將 的參考取代
為您新建立的儲存貯體名稱。現在,您的 EMR Serverless 應用程式已準備好執行任務。amzn-s3-demo-bucket
-
features.zip
使用下列命令下載範例資料封存。wget https://docs.aws.amazon.com/amazondynamodb/latest/developerguide/samples/features.zip
-
從封存中擷取
features.txt
檔案,並檢視檔案中的前幾行:unzip features.zip head features.txt
結果看起來應該類似於以下內容。
1535908|Big Run|Stream|WV|38.6370428|-80.8595469|794 875609|Constable Hook|Cape|NJ|40.657881|-74.0990309|7 1217998|Gooseberry Island|Island|RI|41.4534361|-71.3253284|10 26603|Boone Moore Spring|Spring|AZ|34.0895692|-111.410065|3681 1506738|Missouri Flat|Flat|WA|46.7634987|-117.0346113|2605 1181348|Minnow Run|Stream|PA|40.0820178|-79.3800349|1558 1288759|Hunting Creek|Stream|TN|36.343969|-83.8029682|1024 533060|Big Charles Bayou|Bay|LA|29.6046517|-91.9828654|0 829689|Greenwood Creek|Stream|NE|41.596086|-103.0499296|3671 541692|Button Willow Island|Island|LA|31.9579389|-93.0648847|98
此處各行中的欄位表示唯一識別符、名稱、自然特徵類型、狀態、緯度、經度和英尺高度。
-
將資料上傳至 Amazon S3
aws s3 cp features.txt s3://
amzn-s3-demo-bucket
/features/
步驟 2:建立 Hive 資料表
使用 Apache Spark 或 Hive 建立新的 Hive 資料表,其中包含 Amazon S3 中上傳的資料。
步驟 3:將資料複製到 DynamoDB
使用 Spark 或 Hive 將資料複製到新的 DynamoDB 資料表。
步驟 4:從 DynamoDB 查詢資料
使用 Spark 或 Hive 查詢 DynamoDB 資料表。