選取您的 Cookie 偏好設定

我們使用提供自身網站和服務所需的基本 Cookie 和類似工具。我們使用效能 Cookie 收集匿名統計資料,以便了解客戶如何使用我們的網站並進行改進。基本 Cookie 無法停用,但可以按一下「自訂」或「拒絕」以拒絕效能 Cookie。

如果您同意,AWS 與經核准的第三方也會使用 Cookie 提供實用的網站功能、記住您的偏好設定,並顯示相關內容,包括相關廣告。若要接受或拒絕所有非必要 Cookie,請按一下「接受」或「拒絕」。若要進行更詳細的選擇,請按一下「自訂」。

使用 Snowball Edge 進行大型資料遷移

焦點模式
使用 Snowball Edge 進行大型資料遷移 - AWS Snowball 邊緣 開發人員指南

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

從內部部署位置進行大型資料遷移需要仔細的規劃、協調和執行,以確保您的資料能夠成功遷移到其中 AWS。

我們建議您在開始遷移之前,先制定資料遷移策略,以避免錯過截止日期、超出預算和遷移失敗的可能性。 AWS Snow 服務可協助您透過 中的 Snowball Edge Large Data Migration Manager (LDMM) 功能放置、訂購和追蹤大型資料遷移專案 AWS Snow 系列管理主控台。

主題,使用 Snowball Edge 規劃大型傳輸以及使用 Snowball Edge 校準大型傳輸描述手動資料遷移程序。您可以使用 Snowball Edge LDMM 遷移計畫來簡化手動步驟。

使用 Snowball Edge 規劃大型傳輸

建議您使用下列各節中的準則,規劃和校正您在現場和伺服器上擁有 AWS Snowball 邊緣 的裝置之間的大型資料傳輸。

步驟 1:了解您要移至雲端的內容

使用 建立第一個任務之前 AWS Snow 系列管理主控台,請確定您評估需要傳輸的資料量、目前存放資料的位置,以及您要將其傳輸到的目的地。對於規模或更大 PB 的資料傳輸,此管理內部管理可讓您在 Snowball Edge 抵達時更加輕鬆。

如果您是 AWS 雲端 第一次將資料遷移至 ,我們建議您設計雲端遷移模型。雲端遷移不會在一夜之間發生。它需要仔細的規劃程序,以確保所有系統都能如預期般運作。

當完成此步驟,您應知道將移至雲端的資料總量。

步驟 2:計算您的目標傳輸速率

請務必估計您可以將資料傳輸到連線至每個伺服器的 Snowball Edge 的速度。此估計速度以 MB/秒為單位,決定您使用本機網路基礎設施將資料從資料來源傳輸至 Snowball Edge 裝置的速度。

注意

對於大型資料傳輸,我們建議您使用 Amazon S3 資料傳輸方法。當您在 中訂購裝置的 時,您必須選取此選項 AWS Snow 系列管理主控台。

若要判斷基準傳輸速率,請將一小部分的資料傳輸至 Snowball Edge 裝置,或傳輸 10 GB 的範例檔案並觀察輸送量。

判斷目標傳輸速度時,請記住,您可以透過調整環境來改善輸送量,包括網路組態、變更網路速度、傳輸檔案的大小,以及可從本機伺服器讀取資料的速度。Amazon S3 轉接器會在您的條件允許的情況下,盡快將資料複製到 Snowball Edge。

步驟 3:判斷您需要多少 Snowball Edge

使用您計劃移至雲端的資料總量、預估的傳輸速度,以及您想要允許將資料移至其中的天數 AWS,判斷大規模資料遷移所需的 Snowball Edge 數量。視裝置類型而定,Snowball Edge 裝置擁有大約 39.5 TB 或 210 TB 的可用儲存空間。例如,如果您想要將 300 TB 的資料移至 AWS 超過 10 天,而且傳輸速度為 250 MB/s,則需要 2 個 Snowball Edge 裝置,其儲存容量為 210 TB。

注意

Snowball Edge LDMM 提供精靈來估計可同時支援的 Snowball Edge 數量。如需詳細資訊,請參閱使用 Snowball Edge 建立大型資料遷移計劃

步驟 4:建立您的任務

知道需要多少 Snowball Edge 之後,您需要為每個裝置建立匯入任務。Snowball Edge LDMM 可簡化多個任務的建立。如需詳細資訊,請參閱放置下一個任務順序

注意

您可以下一份任務訂單,並直接從建議的任務訂購排程自動將其新增至您的計劃。如需詳細資訊,請參閱建議的任務排序排程

步驟 5:將資料分成傳輸區段

作為涉及多個任務的大型資料傳輸的最佳實務,我們建議您以邏輯方式將資料分割成數個更小、更易於管理的資料集。這可讓您一次傳輸每個分割區,或平行傳輸多個分割區。規劃分割區時,請確定分割區的資料組合符合任務的 Snowball Edge。例如,您可以透過下列任何方式,將傳輸分隔為分割區:

  • 例如,您可以建立 10 個分割區,每個分割區 20 TB,以便與具有 210 TB 儲存空間的 Snowball Edge 裝置搭配使用。

  • 對於大型檔案,每個檔案可以是 Amazon S3 中物件的個別分割區,大小上限為 5 TB。

  • 每個分割區的大小可能不同,而且每個分割區可以由相同類型的資料組成,例如,一個分割區中的小型檔案、另一個分割區中的壓縮封存、另一個分割區中的大型檔案等。此方法可協助您判斷不同類型的檔案的平均傳輸速率。

注意

中繼資料操作會針對每個傳輸的檔案執行。無論檔案的大小,此額外負荷保持不變。因此,您可以將小型檔案壓縮成較大的套件、批次處理檔案或傳輸較大的個別檔案,以取得更快的效能。

建立資料傳輸區段可讓您更輕鬆地快速解決傳輸問題,因為在傳輸執行一天或更久之後,嘗試對大型、異質的傳輸進行故障診斷可能很複雜。

當您完成規劃 PB 級資料傳輸時,我們建議您從伺服器將幾個區段傳輸到 Snowball Edge 裝置,以校正您的速度和總傳輸時間。

在本頁面

隱私權網站條款Cookie 偏好設定
© 2025, Amazon Web Services, Inc.或其附屬公司。保留所有權利。