Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Cet exemple montre comment charger des données dans Amazon Neptune. Sauf indication contraire, vous devez suivre ces étapes depuis une instance Amazon Elastic Compute Cloud (Amazon EC2) située dans le même Amazon Virtual Private Cloud (VPC) que votre instance de base de données Neptune.
Prérequis pour l'exemple de chargement de données
Avant de commencer, les prérequis suivants doivent être remplis :
-
Vous devez disposer d'une instance de base de données Neptune.
Pour plus d'informations sur le lancement d'une instance de base de données Neptune, consultez Création d'un cluster Amazon Neptune.
-
Vous devez disposer d'un compartiment Amazon Simple Storage Service (Amazon S3) dans lequel stocker les fichiers de données :
Vous pouvez utiliser un compartiment existant. Si vous n'avez pas de compartiment S3, consultez Création d'un compartiment dans le Guide de démarrage Amazon S3.
-
Vous devez disposer des données de graphe à charger, dans un des formats compatibles avec le chargeur :
Si vous utilisez Gremlin pour interroger votre graphe, Neptune peut charger les données dans comma-separated-values un format
CSV
(), comme décrit dans. Format de chargement de données GremlinSi vous utilisez openCypher pour interroger le graphe, Neptune peut également charger les données dans un format
CSV
spécifique à openCypher, comme décrit dans Format de chargement des données openCypher.Si vous utilisez SPARQL, Neptune peut charger les données dans divers formats RDF, comme décrit dans Formats de chargement de données RDF.
-
Vous devez disposer d'un rôle IAM pour l'instance de base de données Neptune, avec une politique IAM qui autorise l'accès aux fichiers de données dans le compartiment S3. La stratégie doit accorder des autorisations de lecture et de type Liste.
Pour plus d'informations sur la création d'un rôle ayant accès à Amazon S3 et sur son association à un cluster Neptune, consultez Prérequis : rôle IAM et accès à Amazon S3.
Note
L'API
Load
Neptune nécessite un accès en lecture aux fichiers de données uniquement. La politique IAM n'a pas besoin d'autoriser un accès en écriture ou un accès au compartiment complet. Vous devez disposer d'un point de terminaison de VPC Amazon S3. Pour plus d’informations, consultez la section Création d'un point de terminaison de VPC Amazon S3.
Création d'un point de terminaison de VPC Amazon S3
Le chargeur Neptune a besoin d’un point de terminaison d’un VPC pour Amazon S3.
Pour configurer l'accès à Amazon S3
Connectez-vous à la console Amazon VPC AWS Management Console et ouvrez-la à l'adresse. https://console.aws.amazon.com/vpc/
Dans le panneau de navigation de gauche, sélectionnez Points de terminaison.
Choisissez Créer un point de terminaison.
-
Pour Nom du service, choisissez
com.amazonaws.
.region
.s3Note
Si la région dans ce champ est incorrecte, assurez-vous que la région de la console est correcte.
Choisissez le VPC qui contient votre instance de base de données Neptune.
Cochez la case en regard des tables de routage associées aux sous-réseaux liés à votre cluster. Si vous n'avez qu'une seule table de routage, vous devez cocher cette case.
Choisissez Créer un point de terminaison.
Pour plus d'informations sur la création du point de terminaison, consultez Points de terminaison de VPC dans le Guide de l'utilisateur Amazon VPC. Pour plus d'informations sur les limites qui s'appliquent aux points de terminaison d'un VPC, consultez Points de terminaisons de VPC pour Amazon S3.
Pour charger des données dans une instance de base de données Neptune
-
Copiez les fichiers de données dans un compartiment Amazon S3. Le compartiment S3 doit se trouver dans la même AWS région que le cluster qui charge les données.
Vous pouvez utiliser la AWS CLI commande suivante pour copier les fichiers dans le compartiment.
Note
Il n'est pas nécessaire d'exécuter cette commande depuis l' EC2 instance Amazon.
aws s3 cp
data-file-name
s3://bucket-name
/object-key-name
Note
Dans Amazon S3, le nom de la clé d'objet est le chemin d'accès complet d'un fichier, y compris le nom du fichier.
Exemple : Dans la commande
aws s3 cp datafile.txt s3://examplebucket/mydirectory/datafile.txt
, le nom de la clé d'objet estmydirectory/datafile.txt
.Vous pouvez également utiliser le AWS Management Console pour télécharger des fichiers dans le compartiment S3. Ouvrez la console Amazon S3 à https://console.aws.amazon.com/s3/
l'adresse et choisissez un compartiment. Dans le coin supérieur gauche, choisissez Upload (Charger) pour charger les fichiers. -
Dans une fenêtre de ligne de commande, entrez ce qui suit pour exécuter le chargeur Neptune en utilisant les valeurs correctes pour votre point de terminaison, le chemin Amazon S3, le format et l'ARN du rôle IAM.
Le paramètre
format
peut avoir l'une des valeurs suivantes :csv
pour Gremlin,opencypher
pour openCypher ountriples
,nquads
,turtle
, etrdfxml
pour RDF. Pour plus d'informations sur les autres paramètres, consultez Commande de chargeur Neptune.Consultez la section Connexion aux points de terminaison Amazon Neptune pour découvrir comment trouver le nom d'hôte de votre instance de base de données Neptune.
Le paramètre de région doit correspondre à la région du cluster et au compartiment S3.
Amazon Neptune est disponible dans les régions suivantes : AWS
USA Est (Virginie du Nord) :
us-east-1
USA Est (Ohio) :
us-east-2
USA Ouest (Californie du Nord) :
us-west-1
USA Ouest (Oregon) :
us-west-2
Canada (Centre) :
ca-central-1
Amérique du Sud (São Paulo) :
sa-east-1
Europe (Stockholm) :
eu-north-1
Europe (Espagne) :
eu-south-2
Europe (Irlande) :
eu-west-1
Europe (Londres) :
eu-west-2
Europe (Paris) :
eu-west-3
Europe (Francfort) :
eu-central-1
Moyen-Orient (Bahreïn) :
me-south-1
Moyen-Orient (EAU) :
me-central-1
Israël (Tel Aviv) :
il-central-1
Afrique (Le Cap) :
af-south-1
Asie-Pacifique (Hong Kong) :
ap-east-1
Asie-Pacifique (Tokyo) :
ap-northeast-1
Asie-Pacifique (Séoul) :
ap-northeast-2
Asie-Pacifique (Osaka) :
ap-northeast-3
Asie-Pacifique (Singapour) :
ap-southeast-1
Asie-Pacifique (Sydney) :
ap-southeast-2
Asie-Pacifique (Jakarta) :
ap-southeast-3
Asie-Pacifique (Malaisie) :
ap-southeast-5
Asie-Pacifique (Mumbai) :
ap-south-1
Chine (Beijing) :
cn-north-1
Chine (Ningxia) :
cn-northwest-1
AWS GovCloud (US-Ouest) :
us-gov-west-1
AWS GovCloud (USA Est) :
us-gov-east-1
curl -X POST \ -H 'Content-Type: application/json' \ https://
your-neptune-endpoint
:port
/loader -d ' { "source" : "s3://bucket-name
/object-key-name
", "format" : "format
", "iamRoleArn" : "arn:aws:iam::account-id
:role/role-name
", "region" : "region
", "failOnError" : "FALSE", "parallelism" : "MEDIUM", "updateSingleCardinalityProperties" : "FALSE", "queueRequest" : "TRUE", "dependencies" : ["load_A_id", "load_B_id"
] }'Pour plus d'informations sur la création et l'association d'un rôle IAM à un cluster Neptune, consultez Prérequis : rôle IAM et accès à Amazon S3.
Note
Pour de plus amples informations sur les paramètres de demande de chargement, veuillez consulter Paramètres de demande du chargeur Neptune. En bref :
Le paramètre
source
accepte un URI Amazon S3 qui pointe vers un seul fichier ou vers un dossier. Si vous spécifiez un dossier, Neptune y charge chaque fichier de données.Le dossier peut contenir plusieurs fichiers de sommet et plusieurs fichiers d'arc.
L'URI peut être à l'un des formats suivants.
s3://
bucket_name
/object-key-name
https://s3.amazonaws.com/
bucket_name
/object-key-name
https://s3-us-east-1.amazonaws.com/
bucket_name
/object-key-name
Ce paramètre
format
peut être l'un des suivants :Format CSV Gremlin (
csv
) pour les graphes de propriétés GremlinFormat CSV openCypher (
opencypher
) pour les graphes de propriétés openCypherFormat N -Triples (
ntriples
) pour RDF/SPARQLFormat N-Quads (
nquads
) pour RDF/SPARQLFormat RDF/XML (
rdfxml
) pour RDF/SPARQLFormat Turtle (
turtle
) pour RDF/SPARQL
Le paramètre facultatif
parallelism
vous permet de limiter le nombre de threads utilisés dans le processus de chargement en bloc. Il peut être défini surLOW
,MEDIUM
,HIGH
ouOVERSUBSCRIBE
.Lorsque la valeur
updateSingleCardinalityProperties
est définie sur"FALSE"
, le chargeur renvoie une erreur si plusieurs valeurs sont fournies dans un fichier source en cours de chargement pour une propriété de sommet d'une arête ou d'une seule cardinalité.Si
queueRequest
est défini sur"TRUE"
, la demande de chargement est placée dans une file d'attente lorsqu'une tâche de chargement est déjà en cours d'exécution.Avec le paramètre
dependencies
, l'exécution de la demande de chargement dépend de la réussite d'une ou de plusieurs tâches de chargement qui ont déjà été placées dans la file d'attente. -
Le chargeur Neptune renvoie un
id
de tâche qui vous permet de vérifier le statut ou d'annuler le processus de chargement, par exemple :{ "status" : "200 OK", "payload" : { "loadId" : "
ef478d76-d9da-4d94-8ff1-08d9d4863aa5
" } } -
Saisissez la commande suivante pour obtenir le statut du chargement avec le paramètre
loadId
de l'étape 3 :curl -G 'https://
your-neptune-endpoint
:port
/loader/ef478d76-d9da-4d94-8ff1-08d9d4863aa5
'Si le statut du chargement signale une erreur, vous pouvez demander un statut plus détaillé et une liste des erreurs. Pour plus d’informations et d’exemples, consultez API Neptune Loader Get-Status .
-
(Facultatif) Annulez la tâche
Load
.Saisissez la commande suivante pour supprimer (
Delete
) la tâche de chargement (loader) avec l'id
de tâche de l'étape 3 :curl -X DELETE 'https://
your-neptune-endpoint
:port
/loader/ef478d76-d9da-4d94-8ff1-08d9d4863aa5
'La commande
DELETE
renvoie le code HTTP200 OK
lorsque l'annulation a réussi.Les données des fichiers de la tâche de chargement qui ont fini de se charger ne sont pas annulées. Les données restent dans l'instance de base de données Neptune.