Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
Klassifikator API
Der Classifier API beschreibt AWS Glue Classifier-Datentypen und umfasst die API zum Erstellen, Löschen, Aktualisieren und Auflisten von Klassifikatoren.
Datentypen
Classifier-Struktur
Classifier werden während einer Durchsuchungsaufgabe ausgelöst. Ein Classifier prüft, ob eine bestimmte Datei ein Format hat, mit dem er umgehen kann. Wenn dies der Fall ist, erstellt der Classifier ein Schema in Form eines StructType-Objekts, das dem Datenformat entspricht.
Sie können die Standardklassifikatoren verwenden, die AWS Glue zur Verfügung stehen, oder Sie können Ihre eigenen Klassifikatoren schreiben, um Ihre Datenquellen bestmöglich zu kategorisieren und die entsprechenden Schemas anzugeben, die für sie verwendet werden sollen. Ein Classifier kann ein grok-Classifier, ein XML-Classifier oder ein JSON-Classifier oder ein benutzerdefinierter CSV-Classifier sein, wie in einem der Felder im Classifier-Objekt angegeben.
Felder
-
GrokClassifier– Ein GrokClassifier-Objekt.Ein Classifier, der
grokverwendet. -
XMLClassifier– Ein XMLClassifier-Objekt.Ein Classifier für XML-Inhalte.
-
JsonClassifier– Ein JsonClassifier-Objekt.Ein Classifier für JSON-Inhalte.
-
CsvClassifier– Ein CsvClassifier-Objekt.Ein Klassifikator für kommagetrennte Werte (). CSV
GrokClassifier Struktur
Ein Classifier, der grok-Muster verwendet.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
Classification— Erforderlich: Zeichenfolge UTF -8.Eine Kennung des Datenformats, dem der Classifier entspricht, z. B. TwitterJSON, Omniture-Logs usw.
-
CreationTime– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier registriert wurde.
-
LastUpdated– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier zuletzt aktualisiert wurde.
-
Version– Zahl (lang).Die Version dieses Classifiers.
-
GrokPattern— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 2048 Byte lang, entspricht. A Logstash Grok string patternDas Grok-Muster, das von diesem Classifier auf einen Datenspeicher angewendet wird. Weitere Informationen finden Sie in den integrierten Mustern unter Schreiben von benutzerdefinierten Classifiern.
-
CustomPatterns— UTF -8 Zeichenfolge, nicht mehr als 16000 Byte lang, entspricht. URI address multi-line string patternOptionale benutzerdefinierte Grok-Muster, die von diesem Classifier definiert werden. Weitere Informationen finden Sie in den benutzerdefinierten Mustern unter Schreiben von benutzerdefinierten Classifiern.
XMLClassifierStruktur
Ein Classifier für XML-Inhalte.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
Classification— Erforderlich: Zeichenfolge UTF -8.Eine ID des Datenformats, dass mit dem Classifier übereinstimmt.
-
CreationTime– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier registriert wurde.
-
LastUpdated– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier zuletzt aktualisiert wurde.
-
Version– Zahl (lang).Die Version dieses Classifiers.
-
RowTag— UTF -8 Zeichenfolge.Das XML Tag, das das Element bezeichnet, das jeden Datensatz in einem XML Dokument enthält, das gerade analysiert wird. Damit kann kein selbstschließendes Element (geschlossen von
/>) identifiziert werden. Ein leeres Zeilenelement, das ausschließlich Attribute enthält, kann analysiert werden, solange es mit einem schließenden Tag endet (z. B. ist<row item_a="A" item_b="B"></row>in Ordnung,<row item_a="A" item_b="B" />aber nicht).
JsonClassifier Struktur
Ein Classifier für JSON-Inhalte.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
CreationTime– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier registriert wurde.
-
LastUpdated– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier zuletzt aktualisiert wurde.
-
Version– Zahl (lang).Die Version dieses Classifiers.
-
JsonPath— Erforderlich: Zeichenfolge UTF -8.Eine
JsonPathZeichenfolge, die die JSON Daten definiert, die der Klassifikator klassifizieren soll. AWS Glue unterstützt eine Teilmenge von JsonPath, wie unter Benutzerdefinierte Klassifikatoren schreiben JsonPath beschrieben.
CsvClassifier Struktur
Ein Classifier für benutzerdefinierte CSV-Inhalte.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
CreationTime– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier registriert wurde.
-
LastUpdated– Zeitstempel.Der Zeitpunkt, an dem dieser Classifier zuletzt aktualisiert wurde.
-
Version– Zahl (lang).Die Version dieses Classifiers.
-
Delimiter— UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 1 Byte lang, entspricht dem. Custom string pattern #26Eine benutzerdefiniertes Symbol zur Bezeichnung, wodurch die einzelnen Spalteneinträge in der Zeile voneinander getrennt werden.
-
QuoteSymbol— UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 1 Byte lang, entspricht der. Custom string pattern #26Ein benutzerdefiniertes Symbol zur Bezeichnung, wodurch Inhalte zu einem einzelnen Spaltenwert miteinander kombiniert werden. Muss sich von dem Spaltentrennzeichen unterscheiden.
-
ContainsHeader— UTF -8 Zeichenfolge (gültige Werte:UNKNOWN|PRESENT|ABSENT).Gibt an, ob die CSV Datei einen Header enthält.
-
Header— Ein Array von UTF -8 Zeichenketten.Eine Liste von Zeichenfolgen, durch die Spaltennamen darstellt werden.
-
DisableValueTrimming– Boolesch.Gibt an, dass Werte vor dem Identifizieren des Typs der Spaltenwerte nicht abgetrennt werden sollen. Der Standardwert ist
true. -
AllowSingleColumn– Boolesch.Aktiviert die Verarbeitung von Dateien, die nur eine Spalte enthalten.
-
CustomDatatypeConfigured– Boolesch.Ermöglicht die Konfiguration des benutzerdefinierten Datentyps.
-
CustomDatatypes— Ein Array von UTF -8 Zeichenketten.Eine Liste von benutzerdefinierten Datentypen, einschließlich "BINARY„," „," BOOLEAN „," DATE „," DECIMAL „," DOUBLE „," FLOAT „," INT „," „," LONG „," SHORT „,"“STRING. TIMESTAMP
-
Serde— UTF -8 Zeichenfolge (gültige Werte:OpenCSVSerDe| |LazySimpleSerDe).NoneLegt den SerDe Wert für die Verarbeitung CSV im Klassifikator fest, der im Datenkatalog angewendet wird. Gültige Werte sind
OpenCSVSerDe,LazySimpleSerDeundNone. Sie können denNone-Wert angeben, wenn der Crawler die Erkennung durchführen soll.
CreateGrokClassifierRequest Struktur
Gibt einen zu erstellenden grok-Classifier für CreateClassifier an.
Felder
-
Classification— Erforderlich: UTF -8 Zeichenfolge.Eine Kennung des Datenformats, dem der Classifier entspricht, z. B. TwitterJSON, Omniture-Logs, CloudWatch Amazon-Logs usw.
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des neuen Classifiers.
-
GrokPattern— Erforderlich: Zeichenfolge UTF -8, nicht weniger als 1 oder mehr als 2048 Byte lang, entspricht. A Logstash Grok string patternDas Grok-Muster, das von diesem Classifier verwendet wird.
-
CustomPatterns— UTF -8 Zeichenfolge, nicht mehr als 16000 Byte lang, entspricht. URI address multi-line string patternOptionale benutzerdefinierte Grok-Muster, die von diesem Classifier verwendet werden.
UpdateGrokClassifierRequest Struktur
Gibt einen Grok-Classifier an, der bei der Weiterleitung an UpdateClassifier aktualisiert werden soll.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name der
GrokClassifier. -
Classification— UTF -8 Zeichenfolge.Eine Kennung des Datenformats, dem der Classifier entspricht, z. B. TwitterJSON, Omniture-Logs, CloudWatch Amazon-Logs usw.
-
GrokPattern— UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 2048 Byte lang, entspricht. A Logstash Grok string patternDas Grok-Muster, das von diesem Classifier verwendet wird.
-
CustomPatterns— UTF -8 Zeichenfolge, nicht mehr als 16000 Byte lang, entspricht. URI address multi-line string patternOptionale benutzerdefinierte Grok-Muster, die von diesem Classifier verwendet werden.
CreateXMLClassifier: Struktur der Anfrage
Gibt einen XML Klassifikator an, der erstellt CreateClassifier werden soll.
Felder
-
Classification— Erforderlich: Zeichenfolge UTF -8.Eine ID des Datenformats, dass mit dem Classifier übereinstimmt.
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
RowTag— UTF -8 Zeichenfolge.Das XML Tag, das das Element bezeichnet, das jeden Datensatz in einem XML Dokument enthält, das gerade analysiert wird. Damit kann kein selbstschließendes Element (geschlossen von
/>) identifiziert werden. Ein leeres Zeilenelement, das ausschließlich Attribute enthält, kann analysiert werden, solange es mit einem schließenden Tag endet (z. B. ist<row item_a="A" item_b="B"></row>in Ordnung,<row item_a="A" item_b="B" />aber nicht).
U Struktur anfordern pdateXMLClassifier
Gibt einen XML Klassifikator an, der aktualisiert werden soll.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
Classification— UTF -8 Zeichenfolge.Eine ID des Datenformats, dass mit dem Classifier übereinstimmt.
-
RowTag— UTF -8 Zeichenfolge.Das XML Tag, das das Element bezeichnet, das jeden Datensatz in einem XML Dokument enthält, das gerade analysiert wird. Beachten Sie, dass dies kein selbstschließendes Element identifizieren kann (geschlossen von
/>). Ein leeres Zeilenelement, das ausschließlich Attribute enthält, kann analysiert werden, solange es mit einem schließenden Tag endet (z. B. ist<row item_a="A" item_b="B"></row>in Ordnung,<row item_a="A" item_b="B" />aber nicht).
CreateJsonClassifierRequest Struktur
Gibt einen zu erstellenden JSON-Classifier für CreateClassifier an.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
JsonPath— Erforderlich: Zeichenfolge UTF -8.Eine
JsonPathZeichenfolge, die die JSON Daten definiert, die der Klassifikator klassifizieren soll. AWS Glue unterstützt eine Teilmenge von JsonPath, wie unter Benutzerdefinierte Klassifikatoren schreiben JsonPath beschrieben.
UpdateJsonClassifierRequest Struktur
Gibt einen JSON Klassifikator an, der aktualisiert werden soll.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
JsonPath— UTF -8 Zeichenfolge.Eine
JsonPathZeichenfolge, die die JSON Daten definiert, die der Klassifikator klassifizieren soll. AWS Glue unterstützt eine Teilmenge von JsonPath, wie unter Benutzerdefinierte Klassifikatoren schreiben JsonPath beschrieben.
CreateCsvClassifierRequest Struktur
Gibt einen benutzerdefinierten CSV Klassifikator an, der erstellt CreateClassifier werden soll.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
Delimiter— UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 1 Byte lang, entspricht dem. Custom string pattern #26Eine benutzerdefiniertes Symbol zur Bezeichnung, wodurch die einzelnen Spalteneinträge in der Zeile voneinander getrennt werden.
-
QuoteSymbol— UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 1 Byte lang, entspricht der. Custom string pattern #26Ein benutzerdefiniertes Symbol zur Bezeichnung, wodurch Inhalte zu einem einzelnen Spaltenwert miteinander kombiniert werden. Muss sich von dem Spaltentrennzeichen unterscheiden.
-
ContainsHeader— UTF -8 Zeichenfolge (gültige Werte:UNKNOWN|PRESENT|ABSENT).Gibt an, ob die CSV Datei einen Header enthält.
-
Header— Ein Array von UTF -8 Zeichenketten.Eine Liste von Zeichenfolgen, durch die Spaltennamen darstellt werden.
-
DisableValueTrimming– Boolesch.Gibt an, dass Werte vor dem Identifizieren des Typs der Spaltenwerte nicht abgetrennt werden sollen. Der Standardwert ist "True".
-
AllowSingleColumn– Boolesch.Aktiviert die Verarbeitung von Dateien, die nur eine Spalte enthalten.
-
CustomDatatypeConfigured– Boolesch.Ermöglicht die Konfiguration benutzerdefinierter Datentypen.
-
CustomDatatypes— Ein Array von UTF -8 Zeichenketten.Erzeugt eine Liste der unterstützten benutzerdefinierten Datentypen.
-
Serde— UTF -8 Zeichenfolge (gültige Werte:OpenCSVSerDe|LazySimpleSerDe|None).Legt den SerDe Wert für die Verarbeitung CSV im Klassifikator fest, der im Datenkatalog angewendet wird. Gültige Werte sind
OpenCSVSerDe,LazySimpleSerDeundNone. Sie können denNone-Wert angeben, wenn der Crawler die Erkennung durchführen soll.
UpdateCsvClassifierRequest Struktur
Gibt einen benutzerdefinierten CSV Klassifikator an, der aktualisiert werden soll.
Felder
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternDer Name des Classifiers.
-
Delimiter— UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 1 Byte lang, entspricht dem. Custom string pattern #26Eine benutzerdefiniertes Symbol zur Bezeichnung, wodurch die einzelnen Spalteneinträge in der Zeile voneinander getrennt werden.
-
QuoteSymbol— UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 1 Byte lang, entspricht der. Custom string pattern #26Ein benutzerdefiniertes Symbol zur Bezeichnung, wodurch Inhalte zu einem einzelnen Spaltenwert miteinander kombiniert werden. Muss sich von dem Spaltentrennzeichen unterscheiden.
-
ContainsHeader— UTF -8 Zeichenfolge (gültige Werte:UNKNOWN|PRESENT|ABSENT).Gibt an, ob die CSV Datei einen Header enthält.
-
Header— Ein Array von UTF -8 Zeichenketten.Eine Liste von Zeichenfolgen, durch die Spaltennamen darstellt werden.
-
DisableValueTrimming– Boolesch.Gibt an, dass Werte vor dem Identifizieren des Typs der Spaltenwerte nicht abgetrennt werden sollen. Der Standardwert ist "True".
-
AllowSingleColumn– Boolesch.Aktiviert die Verarbeitung von Dateien, die nur eine Spalte enthalten.
-
CustomDatatypeConfigured– Boolesch.Gibt die Konfiguration benutzerdefinierter Datentypen an.
-
CustomDatatypes— Ein Array von UTF -8 Zeichenketten.Gibt eine Liste der unterstützten benutzerdefinierten Datentypen an.
-
Serde— UTF -8 Zeichenfolge (gültige Werte:OpenCSVSerDe|LazySimpleSerDe|None).Legt den SerDe Wert für die Verarbeitung CSV im Klassifikator fest, der im Datenkatalog angewendet wird. Gültige Werte sind
OpenCSVSerDe,LazySimpleSerDeundNone. Sie können denNone-Wert angeben, wenn der Crawler die Erkennung durchführen soll.
Operationen
CreateClassifier Aktion (Python: create_classifier)
Erstellt einen Classifier im Konto des Benutzers. Dies kann ein GrokClassifier, ein XMLClassifier, ein JsonClassifier oder ein CsvClassifier sein, je nachdem, welches Feld der Anforderung vorhanden ist.
Anforderung
-
GrokClassifier– Ein CreateGrokClassifierRequest-Objekt.Ein
GrokClassifier-Objekt, das den zu erstellenden Classifier angibt. -
XMLClassifier– Ein reateXMLClassifierC-Anfrage-Objekt.Ein
XMLClassifier-Objekt, das den zu erstellenden Classifier angibt. -
JsonClassifier– Ein CreateJsonClassifierRequest-Objekt.Ein
JsonClassifier-Objekt, das den zu erstellenden Classifier angibt. -
CsvClassifier– Ein CreateCsvClassifierRequest-Objekt.Ein
CsvClassifier-Objekt, das den zu erstellenden Classifier angibt.
Antwort
Keine Antwortparameter.
Fehler
AlreadyExistsExceptionInvalidInputExceptionOperationTimeoutException
DeleteClassifier Aktion (Python: delete_classifier)
Entfernt einen Classifier aus dem Data Catalog.
Anforderung
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternName des zu entfernenden Classifiers.
Antwort
Keine Antwortparameter.
Fehler
EntityNotFoundExceptionOperationTimeoutException
GetClassifier Aktion (Python: get_classifier)
Abrufen eines Classifiers nach Namen.
Anforderung
-
Name— Erforderlich: UTF -8 Zeichenfolge, nicht weniger als 1 oder mehr als 255 Byte lang, entspricht. Single-line string patternName des abzurufenden Classifiers.
Antwort
-
Classifier– Ein Classifier-Objekt.Der angeforderte Classifier.
Fehler
EntityNotFoundExceptionOperationTimeoutException
GetClassifiers Aktion (Python: get_classifiers)
Listet alle Classifier-Objekte im Data Catalog auf.
Anforderung
-
MaxResults– Zahl (Ganzzahl), nicht kleiner als 1 oder größer als 1000.Größe der zurückzugebenden Liste (optional).
-
NextToken— UTF -8 Zeichenfolge.Ein optionales Fortsetzungs-Token.
Antwort
-
Classifiers– Ein Array mit Classifier-Objekten.Die angeforderte Liste der Classifier-Objekte.
-
NextToken— UTF -8 Zeichenfolge.Ein Fortsetzungs-Token.
Fehler
OperationTimeoutException
UpdateClassifier Aktion (Python: update_classifier)
Ändert einen vorhandenen Classifier (einen GrokClassifier, einen XMLClassifier, einen JsonClassifier oder einen CsvClassifier, je nachdem, welches Feld vorhanden ist).
Anforderung
-
GrokClassifier– Ein UpdateGrokClassifierRequest-Objekt.Ein
GrokClassifier-Objekt mit aktualisierten Feldern. -
XMLClassifier– Ein U pdateXMLClassifier Anfrage-Objekt.Ein
XMLClassifier-Objekt mit aktualisierten Feldern. -
JsonClassifier– Ein UpdateJsonClassifierRequest-Objekt.Ein
JsonClassifier-Objekt mit aktualisierten Feldern. -
CsvClassifier– Ein UpdateCsvClassifierRequest-Objekt.Ein
CsvClassifier-Objekt mit aktualisierten Feldern.
Antwort
Keine Antwortparameter.
Fehler
InvalidInputExceptionVersionMismatchExceptionEntityNotFoundExceptionOperationTimeoutException
