Verwenden von Datenrepository-Aufgaben zum Exportieren von Änderungen - FSxfür Lustre

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Verwenden von Datenrepository-Aufgaben zum Exportieren von Änderungen

Die Aufgabe zum Exportieren von Datenrepositorien exportiert Dateien, die in Ihrem Dateisystem neu sind oder geändert wurden. Sie erstellt ein neues Objekt in S3 für jede neue Datei im Dateisystem. Für jede Datei, die im Dateisystem geändert wurde oder deren Metadaten geändert wurden, wird das entsprechende Objekt in S3 durch ein neues Objekt mit den neuen Daten und Metadaten ersetzt. Für Dateien, die aus dem Dateisystem gelöscht wurden, werden keine Maßnahmen ergriffen.

Anmerkung

Beachten Sie bei der Verwendung von Aufgaben zum Exportieren von Datenrepositorys Folgendes:

  • Die Verwendung von Platzhaltern zum Ein- oder Ausschließen von Dateien für den Export wird nicht unterstützt.

  • Bei der Ausführung von mv Vorgängen wird die Zieldatei nach dem Verschieben nach S3 exportiert, auch wenn keine UIDGID, Berechtigungen oder Inhaltsänderungen vorgenommen wurden.

Gehen Sie wie folgt vor, um Daten und Metadatenänderungen im Dateisystem mithilfe der FSx Amazon-Konsole und CLI in verknüpfte S3-Buckets zu exportieren. Beachten Sie, dass Sie eine Datenrepository-Aufgabe für mehrere DRAs verwenden können.

  1. Öffnen Sie die FSx Amazon-Konsole unter https://console.aws.amazon.com/fsx/.

  2. Wählen Sie im Navigationsbereich Dateisysteme und anschließend Ihr Lustre-Dateisystem aus.

  3. Wählen Sie die Registerkarte Daten-Repository.

  4. Wählen Sie im Bereich Datenrepository-Verknüpfungen die Datenrepository-Zuordnung aus, für die Sie die Exportaufgabe erstellen möchten.

  5. Wählen Sie für Aktionen die Option Aufgabe exportieren aus. Diese Option ist nicht verfügbar, wenn das Dateisystem nicht mit einem Datenrepository auf S3 verknüpft ist. Das Aufgabendialogfeld Exportdaten-Repository erstellen wird angezeigt.

  6. (Optional) Geben Sie bis zu 32 Verzeichnisse oder Dateien an, die aus Ihrem FSx Amazon-Dateisystem exportiert werden sollen, indem Sie die Pfade zu diesen Verzeichnissen oder Dateien unter Zu exportierende Dateisystempfade angeben. Die von Ihnen angegebenen Pfade müssen sich auf den Bereitstellungspunkt des Dateisystems beziehen. Wenn der Einhängepunkt ein Verzeichnis oder eine Datei auf dem Dateisystem /mnt/fsx/path1 ist /mnt/fsx und ist, das Sie exportieren möchten, dann ist der Pfad, den Sie angeben möchtenpath1.

    Anmerkung

    Wenn ein von Ihnen angegebener Pfad nicht gültig ist, schlägt die Aufgabe fehl.

  7. (Optional) Wählen Sie unter Abschlussbericht die Option Aktivieren aus, um nach Abschluss der Aufgabe einen Bericht über den Abschluss der Aufgabe zu erstellen. Ein Bericht über den Abschluss der Aufgabe enthält Details zu den Dateien, die von der Aufgabe verarbeitet wurden und die dem unter Berichtsbereich angegebenen Umfang entsprechen. Um den Speicherort anzugeben, an den Amazon den Bericht liefern FSx soll, geben Sie einen relativen Pfad im verknüpften S3-Datenrepository des Dateisystems als Berichtspfad ein.

  8. Wählen Sie Create (Erstellen) aus.

    Eine Benachrichtigung oben auf der Seite Dateisysteme zeigt an, dass die Aufgabe, die Sie gerade erstellt haben, in Bearbeitung ist.

Um den Status und die Details der Aufgabe einzusehen, scrollen Sie auf der Registerkarte Daten-Repository für das Dateisystem nach unten zum Bereich Daten-Repository-Aufgaben. In der Standardsortierreihenfolge wird die neueste Aufgabe ganz oben in der Liste angezeigt.

Um auf dieser Seite eine Aufgabenzusammenfassung anzuzeigen, wählen Sie die Task-ID für die Aufgabe, die Sie gerade erstellt haben. Die Übersichtsseite für die Aufgabe wird angezeigt.

  • Verwenden Sie den create-data-repository-taskCLIBefehl, um Daten und Metadatenänderungen in Ihrem FSx for Lustre-Dateisystem zu exportieren. Die entsprechende API Operation ist CreateDataRepositoryTask.

    $ aws fsx create-data-repository-task \
    --file-system-id fs-0123456789abcdef0 \
    --type EXPORT_TO_REPOSITORY \
    --paths path1,path2/file1 \
    --report Enabled=true

    Nach erfolgreicher Erstellung der Datenrepository-Aufgabe FSx gibt Amazon die Aufgabenbeschreibung als zurückJSON, wie im folgenden Beispiel gezeigt.

    {
    "Task": {
        "TaskId": "task-123f8cd8e330c1321",
        "Type": "EXPORT_TO_REPOSITORY",
        "Lifecycle": "PENDING",
        "FileSystemId": "fs-0123456789abcdef0",
        "Paths": ["path1", "path2/file1"],
        "Report": {
            "Path":"s3://dataset-01/reports",
            "Format":"REPORT_CSV_20191124",
            "Enabled":true,
            "Scope":"FAILED_FILES_ONLY"
        },
        "CreationTime": "1545070680.120",
        "ClientRequestToken": "10192019-drt-12",
        "ResourceARN": "arn:aws:fsx:us-east-1:123456789012:task:task-123f8cd8e330c1321"
    }
}

Nachdem Sie die Aufgabe zum Exportieren von Daten in das verknüpfte Daten-Repository erstellt haben, können Sie den Status der Aufgabe zum Exportieren des Daten-Repositorys überprüfen. Weitere Informationen zum Anzeigen von Datenrepository-Aufgaben finden Sie unterZugreifen auf Datenrepository-Aufgaben.