Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
# Durchführung einer großen Datenmigration mit AWS DataSync
Umfangreiche Datenmigrationen können die Übertragung großer Datenmengen beinhalten, die Millionen von Dateien oder Objekten in verschiedenen Formaten umfassen. AWS DataSync vereinfacht diese komplexen Übertragungen durch Verwaltung der Planung, Überwachung, Verschlüsselung und Datenüberprüfung.
## Was ist eine umfangreiche Datenmigration?
Eine umfangreiche Datenmigration beinhaltet in der Regel die Übertragung von Terabyte oder mehr an Daten, die über verschiedene Quellen verteilt sind, in eine neue Zielspeicherumgebung (in diesem Fall AWS). Diese Migrationen erfordern eine sorgfältige Planung und Koordination innerhalb Ihres Unternehmens, um Daten erfolgreich zu verschieben und gleichzeitig Betriebsunterbrechungen zu minimieren.
DataSync kann diese Migrationen vereinfachen, die in der Regel komplexer Natur sind. Zu den Vorteilen der Verwendung DataSync für Ihre Migration gehören:
+ Automatisierte Verwaltung der Datenübertragungsprozesse und der Infrastruktur, die für leistungsstarke und sichere Datenübertragungen erforderlich sind.
+ End-to-end Sicherheit, einschließlich Verschlüsselung und Überprüfung der Datenintegrität, um sicherzustellen, dass Ihre Daten sicher, unversehrt und einsatzbereit ankommen.
+ Ein speziell entwickeltes Netzwerkprotokoll und eine parallel Multithread-Architektur zur Beschleunigung von Migrationen.
## Die wichtigsten Phasen einer Migration großer Datenmengen
In der Regel können Sie eine umfangreiche Migration in die folgenden Phasen unterteilen:
+ **(Phase 1) Planung Ihrer Datenmigration** — In dieser Phase versuchen Sie zu verstehen, warum Sie migrieren und mit welcher Art von Daten Sie arbeiten. Zu den Planungsaktivitäten gehören:
+ Verstehen, warum Sie migrieren möchten
+ Zusammenstellung eines Teams, das Sie bei allen Aspekten der Migration unterstützt.
+ Identifizierung von Datenstandorten, Formaten und Nutzungsmustern
+ Bewertung der verfügbaren Hardwareressourcen und Netzwerkanforderungen (wenn Sie von einem lokalen Rechenzentrum aus migrieren)
+ Durchführung von Machbarkeitsstudien (POC) mit dem Ziel, die Zeitpläne für die Migration DataSync abzuschätzen, Zeitfenster für die Umstellung zu planen und ein Gefühl dafür zu bekommen, wie Sie die Konfiguration vornehmen müssen DataSync
+ **(Phase 2) Implementierung Ihrer Migration großer Datenmengen** — Zu diesem Zeitpunkt validieren Sie Ihren Plan und beginnen mit der Migration. Zu den Implementierungsaktivitäten gehören:
+ Validierung des Migrationsplans
+ Durchführung schrittweiser Umstellungen, die die erwartungsgemäße Überwachung und Überprüfung Ihrer Datenübertragungen beinhalten
+ Optimierung und Anpassung nach Bedarf zwischen den einzelnen Umstellungen
+ Bereinigen Sie ungenutzte Ressourcen, sobald Sie fertig sind
## Weitere Ressourcen
AWS Prescriptive Guidance bietet die folgenden Ressourcen, die Ihnen bei der Planung und Implementierung einer großen Migration helfen können. Anhand dieses Leitfadens erfahren Sie, wie DataSync Sie im Kontext gängiger Migrationsprozesse und -aktivitäten vorgehen können.
+ [Große Migrationen in die Cloud AWS](https://aws.amazon.com/prescriptive-guidance/large-migrations/?large-migration-strategies.sort-by=item.additionalFields.sortText&large-migration-strategies.sort-order=desc&large-migration-playbooks.sort-by=item.additionalFields.sortText&large-migration-playbooks.sort-order=desc&large-migration-patterns.sort-by=item.additionalFields.sortText&large-migration-patterns.sort-order=desc)
+ [Strategie und bewährte Methoden für große Migrationen AWS](https://docs.aws.amazon.com/prescriptive-guidance/latest/strategy-large-scale-migrations/welcome.html)
+ [Migrieren Sie gemeinsam genutzte Dateisysteme in einer AWS großen Migration](https://docs.aws.amazon.com/prescriptive-guidance/latest/patterns/migrate-shared-file-systems-in-an-aws-large-migration.html) — Diese Ressource enthält eine **SFS-Discovery-Arbeitsmappe**, die Sie herunterladen und verwenden können, um eine Migration auf Dateifreigabeebene zu planen.
# Phase 1: Planung Ihrer Migration großer Datenmengen
Die Planung ist bei der Migration eines großen Datensatzes unerlässlich. Sie müssen wissen, welche Daten Sie migrieren, welche Beweggründe Sie für die Migration hatten und wie wir Ihnen helfen AWS DataSync können, Ihre Daten dorthin zu bringen, wo Sie sie haben möchten.
**Topics**
+ [Erfassung der Anforderungen für Ihre Migration](gathering-migration-requirements.md)
+ [Durchführung eines DataSync Machbarkeitsnachweises](datasync-large-migration-poc.md)
+ [Schätzung der Migrationszeitpläne](datasync-large-migration-timelines.md)
# Erfassung der Anforderungen für Ihre Migration
Der erste Schritt bei einer großen Datenmigration erfordert die Erfassung einer Vielzahl von Informationen in Ihrer gesamten Organisation.
Diese Informationen helfen Ihnen bei der Erstellung eines [Migrationsprozesses](https://docs.aws.amazon.com/prescriptive-guidance/latest/strategy-large-scale-migrations/process.html), der bei umfangreichen Migrationen mehrere Übertragungen und Verfahren zur Übertragung von Vorgängen (in [Wellen](https://docs.aws.amazon.com/prescriptive-guidance/latest/application-portfolio-assessment-guide/wave-planning.html)) von Ihrem Quell- auf Ihren Zielspeicher umfassen kann.
## Verstehen Sie, warum Sie migrieren möchten
Bevor Sie mit der Migration zu beginnen AWS, müssen Sie genau verstehen, warum Sie Ihre Daten migrieren. Dies hilft bei der Bewältigung gängiger Migrationsherausforderungen wie der Einhaltung von Fristen, der Verwaltung von Ressourcen und der teamübergreifenden Koordination.
Wenn Sie Hilfe bei der Ermittlung Ihrer Beweggründe für die Migration benötigen, beantworten Sie diese Fragen:
+ Geben Sie lokalen Speicherplatz frei?
+ Halten Sie die Vertragsfristen für Hardwaresupport ein?
+ Ist das für den Ausgang eines Rechenzentrums?
+ Was ist Ihr Zeitplan für die Migration?
+ Übertragen Sie Daten aus einem anderen Cloud-Speicher?
+ Migrieren Sie teilweise oder vollständige Datensätze?
+ Ist das für die Datenarchivierung?
+ Benötigen Anwendungen oder Benutzer regelmäßigen Zugriff auf diese Daten?
## Die Logistik herausfinden
Gehen Sie auf einige grundlegende logistische Fragen zu Ihrer Speicherumgebung, der Migration und Ihrer Organisation ein:
1. Verschaffen Sie sich ein grundlegendes Verständnis Ihrer aktuellen Datenspeicherinfrastruktur.
1. Prüfen Sie, ob Sie einen [DataSync Agenten](do-i-need-datasync-agent.md) benötigen. Sie benötigen beispielsweise einen Agenten, wenn Sie Daten aus einem lokalen Speicher übertragen.
1. Wenn Sie einen Agenten benötigen, stellen Sie sicher, dass Sie die [Anforderungen des Agenten](agent-requirements.md) verstehen:
+ Ein Agent kann als virtuelle Maschine (VM) auf VMware ESXi, Linux Kernel-based Virtual Machine (KVM) und Microsoft Hyper-V Hyper-V-Hypervisoren ausgeführt werden. Sie können einen Agenten auch als Amazon EC2 EC2-Instance innerhalb AWS bereitstellen.
+ Große Migrationen sind in der Regel speicherintensiv. Stellen Sie sicher, dass Ihr Agent über ausreichend RAM verfügt.
1. Identifizieren Sie die wichtigsten Stakeholder aus Ihren Führungskräften, Netzwerk-, Speicher- und IT-Abteilungen, die an der Migration beteiligt werden müssen. Dazu können folgende Angaben zählen:
+ Finden Sie [einen Ansprechpartner, der](https://docs.aws.amazon.com/prescriptive-guidance/latest/strategy-large-scale-migrations/people.html) sich ausschließlich mit dem Projekt und seinen Ergebnissen befasst.
+ Ermitteln Sie, wer für den Besitz und die Klassifizierung der Daten verantwortlich ist, die Sie migrieren.
+ Identifizieren Sie, wer Ihre Quelle verwaltet und wer letztendlich den AWS Speicherservice verwaltet, zu dem Sie migrieren.
+ Finden Sie heraus, wer weitere Prozesse für Ihre Daten erstellt und verwaltet, sobald sie eingegangen sind. AWS
1. Richten Sie abteilungsübergreifende Kommunikationskanäle ein.
1. Erstellen Sie einen Rollback-Plan für Eventualitäten.
1. Dokumentieren Sie den gesamten Migrationsprozess, einschließlich der Phasen-, Validierungs- und Umstellungsverfahren. Verwenden Sie dies als Ihr Runbook für die gesamte Migration. Sie werden diesen Prozess bei der Planung und Implementierung der Migration aktualisieren.
## Überprüfung der Daten, die Sie migrieren
Analysieren Sie gemeinsam mit Ihren Speicher- und Anwendungsteams die Eigenschaften der Daten, die Sie migrieren möchten. Diese Informationen helfen Ihnen bei der Festlegung einer Migrationsstrategie, mit DataSync der Sie sie umsetzen können.
**Contents**
+ [Ermitteln von Datennutzungsmustern](#review-migration-data-usage)
+ [Identifizieren der Datenstruktur und des Layouts](#review-migration-data-structure)
+ [Dokumentieren von Shares und Ordnern](#review-migration-data-document-shares)
+ [Analysieren von Dateigrößen](#review-migration-data-file-sizes)
### Ermitteln von Datennutzungsmustern
+ Planen Sie für aktiv genutzte Daten mit häufigen Änderungen mehrere Wellen inkrementeller Übertragungen ein, um eine Unterbrechung des Geschäftsbetriebs zu vermeiden.
+ Bei schreibgeschützten Daten, die als archivierend betrachtet werden könnten, müssen Sie möglicherweise keine Wellen einplanen.
+ Wenn Sie unterschiedliche Datennutzungsmuster haben, sollten Sie Wellen planen, bei denen diese verschiedenen Datensätze separat migriert werden. Beispielsweise könnten Sie eine Welle für Archivdaten haben, während die restlichen Wellen der Migration aktiver Daten gewidmet sind.
### Identifizieren der Datenstruktur und des Layouts
+ Stellen Sie fest, ob die Daten nach Zeiträumen (Jahr, Monat, Tag) oder nach anderen Mustern organisiert sind.
+ Verwenden Sie diese Organisationsstruktur, um Ihre Migrationswellen zu planen. Beispielsweise könnten Sie während einer Welle Archivdaten für ein Jahr migrieren.
### Dokumentieren von Shares und Ordnern
+ Erstellen Sie eine Bestandsaufnahme der Freigaben und Ordner (einschließlich der Anzahl der Dateien oder Objekte für jede Datei).
+ Identifizieren Sie Shares und Ordner mit aktiven Datensätzen. Diese erfordern möglicherweise inkrementelle Übertragungen während der Migration.
+ Überprüfen Sie die [DataSync Kontingente](datasync-limits.md). Dies kann Ihnen bei der Planung helfen, wie Sie Ihren Datensatz bei der Konfiguration partitionieren möchten DataSync.
### Analysieren von Dateigrößen
+ Erwarten Sie bei Übertragungen mit größeren Dateien (MB oder GB) einen höheren Datendurchsatz als bei kleineren Dateien (KB).
+ Wenn Sie mit vielen kleineren Dateien arbeiten, müssen Sie mit mehr Metadatenoperationen auf Ihrem Speichersystem und einem geringeren Datendurchsatz rechnen. DataSyncführt diese Operationen aus, wenn Sie Ihre Quell- und Zielspeicherorte vergleichen und verifizieren.
## Identifizierung der Speicheranforderungen
Um einen kompatiblen AWS Speicherservice für die Migration Ihrer Daten auszuwählen, müssen Sie die Eigenschaften und die Leistung Ihres Quellspeichersystems bewerten.
Diese Informationen können Ihnen auch bei der [Planung Ihrer Übertragungen](task-scheduling.md) helfen, um die Auswirkungen auf den Geschäftsbetrieb während der Migration so gering wie möglich zu halten.
**Contents**
+ [Bestimmung der Unterstützung für den Quellspeicher](#determine-storage-requirements-protocols)
+ [Überprüfung der Anforderungen an die Aufbewahrung von Metadaten](#determine-storage-requirements-metadata)
+ [Erfassung von Leistungsmetriken aus dem Quellspeicher](#determine-storage-requirements-performance)
+ [Auswahl eines AWS Zielspeicherdienstes](#determine-storage-requirements-destination)
### Bestimmung der Unterstützung für den Quellspeicher
DataSync kann mit einer Vielzahl von Speichersystemen arbeiten, die den Zugriff über NFS-, SMB-, HDFS- und S3-kompatible Objektspeicherclients ermöglichen.
Wenn Sie von einem anderen Cloud-Speicher migrieren, stellen Sie sicher, dass dieser mit diesem DataSync Anbieter funktioniert. Eine Liste der unterstützten Quellverzeichnisse finden Sie unter [Mit wem kann ich meine Daten übertragen AWS DataSync?](working-with-locations.md)
### Überprüfung der Anforderungen an die Aufbewahrung von Metadaten
DataSync kann Ihre Datei- oder Objektmetadaten während einer Übertragung beibehalten. Wie Ihre Metadaten erhalten bleiben, hängt von Ihren Übertragungsorten ab und davon, ob diese Speicherorte ähnliche Arten von Metadaten verwenden.
DataSync benötigt in einigen Fällen zusätzliche Berechtigungen zur Aufbewahrung von Dateimetadaten, wie z. B. diskretionäre NTFS-Zugriffslisten ()DACLs.
Weitere Informationen finden Sie unter [Verstehen, wie DataSync mit Datei- und Objektmetadaten umgegangen wird](metadata-copied.md).
### Erfassung von Leistungsmetriken aus dem Quellspeicher
Messen Sie die Ausgangs-IOPS und den Festplattendurchsatz bei durchschnittlichen und Spitzenauslastungen für Ihren Quellspeicher. Die Übertragung von Daten erhöht den I/O Mehraufwand sowohl für Ihre Quell- als auch für Ihre Zielspeichersysteme.
Vergleichen Sie diese Leistungsdaten mit den Spezifikationen Ihres Speichersystems, um die verfügbaren Leistungsressourcen zu ermitteln.
### Auswahl eines AWS Zielspeicherdienstes
Zu diesem Zeitpunkt haben Sie vielleicht eine Vorstellung davon, welcher AWS Speicherdienst für Ihre Daten sinnvoll ist. Wenn nicht, sind Datennutzungsmuster und Speicherleistung einige Bereiche, die Sie bei Ihrer Entscheidung berücksichtigen sollten. Sie könnten beispielsweise Amazon S3 in Betracht ziehen, wenn Sie über Archivdaten verfügen, und Amazon FSx oder Amazon EFS für aktive Daten.
Informationen zur Auswahl des richtigen objekt- oder dateibasierten Speichers für Ihre Daten finden Sie unter [Auswahl eines AWS Speicherdienstes](https://docs.aws.amazon.com/decision-guides/latest/storage-on-aws-how-to-choose/choosing-aws-storage-service.html).
## Ermitteln der Netzwerkanforderungen
Um Ihre Daten mit zu migrieren DataSync, müssen Sie Netzwerkverbindungen zwischen Ihrem Quellspeicher, Ihrem Agenten und herstellen AWS. Außerdem müssen Sie genügend Netzwerkbandbreite und Infrastruktur einplanen.
Ermitteln Sie gemeinsam mit Ihren Netzwerktechnikern und Speicheradministratoren die folgenden Netzwerkanforderungen.
**Contents**
+ [Bewertung Ihrer verfügbaren Netzwerkbandbreite](#datasync-migration-network-bandwidth)
+ [Erwägen Sie Optionen für die Verbindung Ihres Netzwerks mit AWS](#datasync-migration-network-connection-options)
+ [Auswahl eines Dienstendpunkts für die Agentenkommunikation](#datasync-migration-network-service-endpoint)
+ [Planung einer ausreichenden Netzwerkinfrastruktur](#datasync-migration-network-interfaces)
### Bewertung Ihrer verfügbaren Netzwerkbandbreite
Ihre verfügbare Netzwerkbandbreite wirkt sich auf Ihre Übertragungsgeschwindigkeiten und die Gesamtmigrationszeit aus. Gehen Sie wie folgt vor, wenn Sie von einem lokalen Speichersystem aus Daten übertragen:
+ Ermitteln Sie gemeinsam mit Ihrem Netzwerkteam die durchschnittliche und maximale Bandbreitennutzung.
+ Identifizieren Sie Zeitfenster, in denen Sie Daten übertragen können, und vermeiden Sie so Störungen des täglichen Betriebs. Auf diese Weise erhalten Sie Informationen darüber, wann Ihre Migrationswellen und Umstellungen stattfinden.
Sie können kontrollieren, wie viel Bandbreite DataSync verwendet wird. Weitere Informationen finden Sie unter [Legen Sie Bandbreitenlimits für Ihre Aufgabe fest AWS DataSync](configure-bandwidth.md).
Da Übertragungen von anderen Cloud-Speichern in der Regel über das öffentliche Internet erfolgen, gibt es bei diesen Übertragungen in der Regel weniger Bandbreitenbeschränkungen und Überlegungen.
### Erwägen Sie Optionen für die Verbindung Ihres Netzwerks mit AWS
Erwägen Sie die folgenden Optionen, um die Netzwerkkonnektivität für Ihre DataSync Übertragung herzustellen:
+ **Direct Connect**- Sehen Sie sich die [Architektur- und Routing-Beispiele](direct-connect-architecture.md) für die Verwendung von Direct Connect mit an DataSync. Sie können die Direct Connect-Aktivitäten mit [Amazon](https://docs.aws.amazon.com/directconnect/latest/UserGuide/monitoring-cloudwatch.html) überwachen CloudWatch.
+ **VPN** — [AWS Site-to-Site VPN](https://docs.aws.amazon.com/vpn/latest/s2svpn/VPC_VPN.html)bietet einen Durchsatz von bis zu 1,25 Gbit/s pro Tunnel.
+ **Öffentliches Internet** — Informationen zur Netzwerknutzung erhalten Sie von Ihrem Internetdienstanbieter.
### Auswahl eines Dienstendpunkts für die Agentenkommunikation
DataSync Agenten verwenden [Dienstendpunkte](choose-service-endpoint.md), um mit dem DataSync Dienst zu kommunizieren. Welchen Endpunkttyp Sie verwenden, hängt davon ab, wie Sie sich mit Ihrem Netzwerk verbinden AWS.
### Planung einer ausreichenden Netzwerkinfrastruktur
Generiert und verwaltet für jede Übertragungsaufgabe, die Sie erstellen, DataSync automatisch die Netzwerkinfrastruktur für Ihre Datenübertragungen. Diese Infrastruktur wird als *Netzwerkschnittstellen* oder *Elastic Network Interfaces* bezeichnet. Dabei handelt es sich um logische Netzwerkkomponenten in einer Amazon Virtual Private Cloud (VPC), die virtuelle Netzwerkkarten darstellen. Weitere Informationen finden Sie im [https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/using-eni.html](https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/using-eni.html).
Jede Netzwerkschnittstelle verwendet eine einzelne IP-Adresse in Ihrem Ziel-VPC-Subnetz. Gehen Sie wie folgt vor, um sicherzustellen, dass Sie über eine ausreichende Netzwerkinfrastruktur für Ihre Migration verfügen:
+ Notieren Sie sich die Anzahl der [Netzwerkschnittstellen](required-network-interfaces.md), die für Ihren DataSync Zielstandort erstellt DataSync werden.
+ Stellen Sie sicher, dass Ihr Subnetz über genügend IP-Adressen für Ihre DataSync Aufgaben verfügt. Für eine Aufgabe, die einen Agenten verwendet, sind beispielsweise vier IP-Adressen erforderlich. Wenn Sie vier Aufgaben für Ihre Migration erstellen, bedeutet das, dass Sie 16 verfügbare IP-Adressen in Ihrem Subnetz benötigen.
# Durchführung eines DataSync Machbarkeitsnachweises
Durch die Durchführung eines Machbarkeitsnachweises (POC) AWS DataSync können Sie die folgenden Aspekte Ihrer Datenmigrationsplanung überprüfen:
+ Überprüfen Sie die Netzwerkkonnektivität zwischen Quell- und Zielstandorten.
+ Überprüfen Sie Ihre anfängliche DataSync Aufgabenkonfiguration.
+ Messen Sie die Leistung der Datenübertragung.
+ Schätzen Sie die Zeitpläne für die Migration ab.
+ Definieren Sie gemeinsam mit den wichtigsten Akteuren, die an der Migration arbeiten, Erfolgskriterien.
## Erste Schritte mit Ihrem Machbarkeitsnachweis
1. Erstellen Sie Ihren DataSync Agenten:
1. [Stellen Sie Ihren Agenten](deploy-agents.md) bereit.
1. [Wählen Sie einen Service-Endpunkt](choose-service-endpoint.md) für Ihren Agenten.
1. [Aktivieren Sie Ihren Agenten](activate-agent.md).
1. [Überprüfen Sie die Netzwerkverbindungen Ihres Agenten](test-agent-connections.md).
1. Wählen Sie eine kleine Teilmenge von Daten aus, die die Daten darstellt, die Sie migrieren.
Wenn Ihr Quellspeicher beispielsweise eine Mischung aus großen und kleinen Dateien enthält, sollte die Teilmenge der Daten, die Sie in Ihrem POC übertragen, dies widerspiegeln. Auf diese Weise erhalten Sie einen ersten Überblick über die Leistung der Speichersysteme, Ihres Netzwerks und. DataSync
1. Erstellen Sie einen DataSync Quellspeicherort für Ihr [lokales](transferring-on-premises-storage.md) oder ein [anderes Cloud-Speichersystem](transferring-other-cloud-storage.md).
1. Erstellen Sie einen DataSync Zielort für Ihren [AWS Speicherdienst](transferring-aws-storage.md).
1. [Erstellen Sie eine DataSync Übertragungsaufgabe](create-task-how-to.md) mit einem [Filter](filtering.md), der nur Ihre Datenteilmenge überträgt.
1. [Starte deine DataSync Aufgabe](run-task.md).
1. Erfassen Sie Kennzahlen zur Übertragungsleistung, indem Sie Folgendes überwachen:
+ Der Daten- und Dateidurchsatz Ihrer Aufgabenausführung. Sie können dies über die DataSync Konsole oder die [DescribeTaskExecution](https://docs.aws.amazon.com/datasync/latest/userguide/API_DescribeTaskExecution.html)Operation tun. Wenn Sie diese Metriken verwenden`DescribeTaskExecution`, berechnen Sie sie wie folgt:
+ **Datendurchsatz**: Dividieren `BytesWritten` durch `TransferDuration`
+ **Dateidurchsatz**: Dividiere `FilesTransferred` durch `TransferDuration`
+ Nutzung des Quell- und Zielspeichers. Arbeiten Sie eng mit Ihren Speicheradministratoren zusammen, um diese Informationen zu erhalten.
+ Netzwerknutzung.
1. Überprüfen Sie die übertragenen Daten an Ihrem Zielort:
+ Überprüfen Sie Ihre CloudWatch Protokolle auf Fehler bei der Ausführung von Aufgaben.
+ Stellen Sie sicher, dass die Berechtigungen und Metadaten am Zielspeicherort erhalten bleiben.
+ Stellen Sie sicher, dass Anwendungen und Benutzer wie erwartet auf Zieldaten zugreifen können.
+ Beheben Sie alle Probleme, auf die Sie stoßen. Weitere Informationen finden Sie unter [AWS DataSync Probleme beheben](troubleshooting-datasync.md).
1. Führen Sie Ihre Aufgabe noch einige Male aus, um eine Vorstellung davon DataSync zu bekommen, wie lange die Vorbereitung, Übertragung und Überprüfung Ihrer Daten dauert. (Weitere Informationen finden Sie unter [Status der Aufgabenausführung](run-task.md#understand-task-execution-statuses).)
Wenn Sie eine Aufgabe mehrmals ausführen, führt sie DataSync standardmäßig eine inkrementelle Übertragung durch und kopiert nur die Daten, die sich gegenüber der vorherigen Aufgabenausführung geändert haben.
Bei inkrementellen Übertragungen wird die Übertragungszeit wahrscheinlich kürzer sein, aber Ihre Übertragung DataSync wird immer auf die gleiche Weise vorbereitet, indem Sie Ihre Standorte scannen und vergleichen, um herauszufinden, was übertragen werden soll. Anhand dieser Vorbereitungszeiten können Sie die [Umstellungsfristen für Ihre Migration abschätzen](datasync-large-migration-timelines.md#datasync-large-migration-cutover-timelines).
1. Falls erforderlich, aktualisieren Sie Ihren Migrationsplan auf der Grundlage dessen, was Sie während des POC gelernt haben.
# Schätzung der Migrationszeitpläne
Anhand der Informationen, die Sie bis jetzt gesammelt haben, können Sie abschätzen, wie lange die Migration dauern wird. AWS DataSync
## Schätzung der Zeitpläne für die Datenübertragung
Anhand der folgenden Informationen, die Sie bei der Erfassung der Migrationsanforderungen und Ihres DataSync Machbarkeitsnachweises (POC) gesammelt haben, können Sie abschätzen, wie lange die Übertragung Ihrer Daten dauert DataSync :
+ Ihre [verfügbare Netzwerkbandbreite](gathering-migration-requirements.md#datasync-migration-network-bandwidth)
+ Kennzahlen zur Quell- und Zielspeichernutzung
+ Leistungskennzahlen aus Ihrem [DataSync POC](datasync-large-migration-poc.md)
**Um einen Zeitplan für die Datenübertragung abzuschätzen**
1. Vergleichen Sie den Daten- und Dateidurchsatz Ihres POC mit Ihrer verfügbaren Netzwerkbandbreite.
1. Wenn Ihr Durchsatz niedriger als Ihre verfügbare Bandbreite ist (z. B. 300 MiB/s für einen Durchsatz mit 10 Gbit/s Netzwerkbandbreite), sollten Sie erwägen, Ihren Datensatz in mehrere Aufgaben zu partitionieren, um die Bandbreitennutzung zu maximieren.
DataSync bietet einige Optionen zur Partitionierung Ihres Datensatzes. Weitere Informationen finden Sie unter [Beschleunigen Sie Ihre Migration durch Datenpartitionierung](datasync-large-migration-data-partitioning.md).
1. Berechnen Sie anhand der folgenden Formel, die eine theoretische Mindestübertragungszeit ergibt, wie viele Tage eine Übertragung dauert:
```
(DATA_SIZE * 8 bits per byte)/(CIRCUIT * NETWORK_UTILIZATION percentage * 3600 seconds per hour * AVAILABLE_HOURS) = Number of days
```
Wenn Sie diese Formel verwenden, ersetzen Sie Folgendes durch Ihre eigenen Werte:
+ `DATA_SIZE`: Die Datenmenge, die Sie migrieren (ausgedrückt in Byte).
+ `CIRCUIT`: Ihre verfügbare Netzwerkbandbreite (ausgedrückt in Bit pro Sekunde).
+ `NETWORK_UTILIZATION`: Wie viel Prozent Ihres Netzwerks werden genutzt?
+ `AVAILABLE_HOURS`: Die Anzahl der an jedem Tag verfügbaren Betriebsstunden.
Sie würden beispielsweise eine Migration mit 100 TB Daten, einer Internetverbindung von 1 Gbit/s, einer Netzwerkauslastung von 80 Prozent und einer Verfügbarkeit von 24 Stunden pro Tag wie folgt berechnen:
`(100,000,000,000,000 bytes * 8) / (1,000,000,000 bps * 0.80 * 3600 * 24) = 11.57 days`
In diesem Fall würde die Migration fast 12 Tage dauern, bevor die realen Bedingungen berücksichtigt werden.
1. Passen Sie Ihre berechnete Übertragungsdauer an die realen Bedingungen an:
+ Schwankungen der Netzwerkleistung
+ Schwankungen der Speicherleistung
+ Ausfallzeiten zwischen den Migrationswellen
## Schätzung der Umstellungsfristen
Wenn Sie aktive Datensätze migrieren, benötigen Sie wahrscheinlich Umstellungen, um den Geschäftsbetrieb nicht zu stören.
Unterschätzen Sie nicht, wie lange Umstellungen dauern. Bei großen Migrationen ist es nicht ungewöhnlich, dass Umstellungsaktivitäten bis zu 30 Prozent Ihrer gesamten Migrationszeit in Anspruch nehmen.
1. Prüfen Sie, ob Sie Umstellungen in Wellen durchführen müssen, um die Datenmenge zu reduzieren, die nach inkrementellen Änderungen gescannt wird.
Eine Strategie hierfür ist das Überschneiden von Datensätzen, die Sie auf der Grundlage von Freigaben, Ordnern oder Speichersystemen partitionieren.
1. Prüfen Sie, wie lange es in der Regel gedauert hat, Ihre Daten während des POC vorzubereiten, DataSync zu übertragen und zu verifizieren.
Beachten Sie insbesondere die Vorbereitungsdauer Ihrer Aufgabenausführungen. Um diese Informationen zu finden, führen Sie den [DescribeTaskExecution](https://docs.aws.amazon.com/datasync/latest/userguide/API_DescribeTaskExecution.html)Vorgang aus und überprüfen Sie dann den Wert [PrepareDuration](https://docs.aws.amazon.com/datasync/latest/userguide/API_TaskExecutionResultDetail.html#DataSync-Type-TaskExecutionResultDetail-PrepareDuration)für die Dauer (in Millisekunden).
1. Schätzen Sie ab, wie lange eine Umstellung dauern könnte, indem Sie das Zeitdelta zwischen parallel Aufgaben messen.
Weitere Informationen zu parallel Aufgaben finden Sie unter[Beschleunigen Sie Ihre Migration durch Datenpartitionierung](datasync-large-migration-data-partitioning.md).
1. Verwenden Sie Ihre Umsatzschätzung, um Ihre Umstellungen zu planen. Dabei handelt es sich im Wesentlichen um Wartungsfenster, in denen Ihre Quelldaten nicht geändert werden können.
## Nächste Schritte
Nachdem Sie Ihre Zeitpläne geschätzt haben, können Sie mit der Implementierung Ihrer Migration beginnen.
# Phase 2: Implementierung Ihrer Migration großer Datenmengen
Mit den Informationen, die Sie bei der Planung gesammelt haben, können Sie mit der Migration AWS DataSync auf Ihr neues Speichersystem beginnen. Falls Sie dies noch nicht getan haben, empfehlen wir Ihnen, die [Ressourcen zu AWS Prescriptive Guidance für umfangreiche](datasync-large-migration.md#review-migration-data-resources) Migrationen zu lesen.
**Topics**
+ [Beschleunigen Sie Ihre Migration durch Datenpartitionierung](datasync-large-migration-data-partitioning.md)
+ [Ausführen Ihrer DataSync Übertragungsaufgaben](datasync-large-migration-running-tasks.md)
+ [Überwachen Sie Ihre Übertragungen](datasync-large-migration-monitoring.md)
# Beschleunigen Sie Ihre Migration durch Datenpartitionierung
Bei einer großen Migration empfehlen wir, Ihren Datensatz mit mehreren DataSync Aufgaben zu partitionieren. Durch die Partitionierung Ihrer Quelldaten auf mehrere Aufgaben (und möglicherweise Agenten) können Sie Ihre Übertragungen parallelisieren und den Migrationszeitraum verkürzen.
Die Partitionierung hilft Ihnen auch dabei, die DataSync [Kontingente](datasync-limits.md) einzuhalten, und vereinfacht die Überwachung und das Debuggen Ihrer Aufgaben.
Das folgende Diagramm zeigt, wie Sie mehrere DataSync Aufgaben und Agenten verwenden können, um Daten aus demselben Quellspeicherort zu übertragen. In diesem Szenario konzentriert sich jede Aufgabe auf einen bestimmten Ordner am Quellspeicherort. Weitere Informationen und Beispiele zu diesen Ansätzen finden Sie unter [So beschleunigen Sie Ihre Datenübertragungen mit AWS DataSync Scale-out-Architekturen](https://aws.amazon.com/blogs/storage/how-to-accelerate-your-data-transfers-with-aws-datasync-scale-out-architectures/).
![\[Ein Diagramm, das einen Ansatz DataSync zur Partitionierung Ihrer Quelldaten zeigt, um eine umfangreiche Migration zu beschleunigen.\]](http://docs.aws.amazon.com/de_de/datasync/latest/userguide/images/datasync-partition-by-folder.png)
## Partitionierung Ihres Datensatzes nach Ordner oder Präfix
Wenn Sie Ihren DataSync Quellspeicherort erstellen, können Sie einen Ordner, ein Verzeichnis oder ein Präfix angeben, aus dem DataSync gelesen wird. Wenn Sie beispielsweise eine Dateifreigabe mit Verzeichnissen der obersten Ebene migrieren, können Sie mehrere Speicherorte erstellen, die einen anderen Verzeichnispfad angeben. Sie können diese Speicherorte dann verwenden, um während Ihrer Migration mehrere DataSync Aufgaben auszuführen.
## Partitionierung Ihres Datensatzes mit Filtern
Sie können [Filter](filtering.md) anwenden, um Daten aus Ihrem Quellstandort in eine Übertragung ein- oder auszuschließen. Im Kontext einer großen Migration können Filter Ihnen helfen, Aufgaben auf bestimmte Teile Ihres Datensatzes einzugrenzen.
Wenn Sie beispielsweise Archivdaten migrieren, die nach Jahren organisiert sind, können Sie einen Einschlussfilter erstellen, der für ein bestimmtes Jahr oder mehrere Jahre geeignet ist. Sie können den Filter auch bei jeder Ausführung der Aufgabe so ändern, dass er einem anderen Jahr entspricht.
## Partitionieren Sie Ihren Datensatz mit Manifesten
Ein [Manifest](transferring-with-manifest.md) ist eine Liste von Dateien oder Objekten, die Sie übertragen DataSync möchten. Bei einem Manifest müssen Sie DataSync nicht alles in einem Quellverzeichnis lesen, um zu bestimmen, was übertragen werden soll.
Sie können Manifeste aus den Beständen Ihres Quellspeichers oder mithilfe ereignisgesteuerter Methoden erstellen (siehe z. B. [Implementierung AWS DataSync mit Hunderten von Millionen von Objekten](https://aws.amazon.com/blogs/storage/implementing-aws-datasync-with-hundreds-of-millions-of-objects/)). Sie können auch bei jedem Start einer Aufgabe ein anderes Manifest verwenden, sodass Sie verschiedene Datensätze mit derselben Aufgabe übertragen können.
# Ausführen Ihrer DataSync Übertragungsaufgaben
Während jeder Ihrer Migrationswellen folgt Ihre Datenübertragung in der Regel demselben allgemeinen Prozess:
1. Führen Sie eine erste vollständige Übertragung Ihrer Daten durch.
1. Überprüfen Sie die Daten im Ziel.
1. Führen Sie inkrementelle Übertragungen für alle Daten durch, die sich seit der ersten Übertragung möglicherweise geändert haben.
1. Verlagern Sie den Betrieb an Ihrem Zielort.
1. Überprüfen Sie die Ergebnisse der Umstellung.
## Ihre Aufgaben ausführen
Wahrscheinlich müssen Sie Ihre DataSync Übertragungsaufgaben während der Geschäftszeiten ausführen, um Ihre Gesamtmigrationszeit zu minimieren. In diesen Situationen ist es üblich, zunächst eine vollständige Übertragung durchzuführen, gefolgt von inkrementellen Übertragungen, bei denen Änderungen von Benutzern und Anwendungen an Ihrem Quellstandort berücksichtigt werden.
Um Netzwerkprobleme während der Geschäftszeiten zu vermeiden, können Sie die Bandbreite begrenzen, die Ihre Aufgaben beanspruchen. Weitere Informationen finden Sie unter [Legen Sie Bandbreitenlimits für Ihre Aufgabe fest AWS DataSync](configure-bandwidth.md).
1. Führen Sie eine erste vollständige Übertragung durch:
1. [Starten Sie Ihre DataSync Aufgabe](run-task.md) (oder Aufgaben, wenn Sie Aufgaben parallel ausführen).
1. Überwachen Sie den Fortschritt und die Leistung Ihrer Aufgabenausführungen.
1. Stellen Sie sicher, dass Ihre Daten erwartungsgemäß übertragen wurden (z. B. werden Dateimetadaten beibehalten).
1. Führen Sie inkrementelle Übertragungen durch:
1. [Planen Sie Ihre Aufgaben](task-scheduling.md) so, dass sie regelmäßig ausgeführt werden.
1. Überwachen Sie Ihre Aufgabenausführungen und beheben Sie etwaige Fehler.
## Durchführung einer Umstellung
Nach Ihren ersten und schrittweisen Übertragungen können Sie mit der Umstellung des Betriebs auf Ihren Zielstandort beginnen.
1. Starten Sie das geplante Wartungsfenster.
1. Aktualisieren Sie Ihr Quellspeichersystem so, dass es nur für Anwendungen und Benutzer lesbar ist.
1. Führen Sie letzte inkrementelle Übertragungen durch, um die verbleibenden Deltas zwischen Ihren Quell- und Zielorten zu kopieren.
1. Führen Sie eine gründliche Datenvalidierung durch (z. B. durch Überprüfung von CloudWatch Protokollen und [Aufgabenberichten](task-reports.md)).
1. Stellen Sie Ihre Anwendungen und Benutzer auf die neue Umgebung Ihres Zielstandorts um.
1. Testen Sie die Anwendungsfunktionalität und stellen Sie sicher, dass Benutzer auf Daten an Ihrem Zielstandort zugreifen können.
1. Vereinbaren Sie ein Treffen mit den Migrationsteams, um den Transfer im Nachhinein zu besprechen. Stellen Sie die folgenden Beispielfragen zur Sondierung:
+ War die Umstellung erfolgreich? Falls nicht, was war das Problem?
+ Haben wir die gesamte verfügbare Bandbreite genutzt?
+ Wurden der Quell- und Zielspeicher voll ausgelastet?
+ Können wir mit zusätzlichen Aufgaben mehr Datendurchsatz erzielen?
+ Müssen wir ein längeres Wartungsfenster einplanen?
1. Falls erforderlich, aktualisieren Sie Ihren Migrationsplan, bevor Sie mit der nächsten Welle beginnen.
# Überwachen Sie Ihre Übertragungen
AWS DataSync bietet verschiedene Überwachungsoptionen, mit denen Sie Ihre Übertragung validieren und debuggen können.
## Überwachen Sie Ihre Übertragungen mit Metriken CloudWatch
Sie können benutzerdefinierte CloudWatch Dashboards mit Metriken aus Ihren DataSync Aufgabenausführungen erstellen. Weitere Informationen finden Sie unter [Überwachung von Datenübertragungen mit CloudWatch Amazon-Metriken](monitor-datasync.md).
## Überwachen Sie Ihre Übertragungen mit Aufgabenberichten
Wenn Sie Millionen von Dateien oder Objekten übertragen, sollten Sie die Verwendung von Aufgabenberichten in Betracht ziehen. Aufgabenberichte enthalten detaillierte Informationen darüber, welche DataSync Versuche während der Ausführung einer Aufgabe zu übertragen, zu überspringen, zu überprüfen und zu löschen sind. Weitere Informationen finden Sie unter [Überwachen Sie Ihre Datenübertragungen mit Aufgabenberichten](task-reports.md).
Sie können Ihre Aufgabenberichte auch mithilfe von AWS Diensten wie AWS Glue Amazon Athena und Amazon Quick visualisieren. Weitere Informationen finden Sie im [AWS Storage-Blog](https://aws.amazon.com/blogs/storage/derive-insights-from-aws-datasync-task-reports-using-aws-glue-amazon-athena-and-amazon-quicksight/).
## Überwachen Sie Ihre Übertragungen mit CloudWatch Logs
Wir empfehlen Ihnen, Ihre Aufgabe mindestens so zu konfigurieren, dass grundlegende Informationen und Übertragungsfehler protokolliert werden. Weitere Informationen finden Sie unter [Überwachung von Datenübertragungen mit Amazon CloudWatch Logs](configure-logging.md).