SPARQL UPDATE LOAD를 사용하여 데이터를 Neptune으로 가져오기

SPARQL UPDATE LOAD를 사용하여 Amazon S3에서 Neptune으로 직접 파일 로드

Neptune에서는 SPARQL UPDATE LOAD를 사용할 때 Amazon S3에 IAM 역할을 전달할 수 없으므로, 문제의 Amazon S3 버킷을 공개하거나 LOAD 쿼리에서 미리 서명된 Amazon S3 URL을 사용해야 합니다.

Amazon S3 파일의 사전 서명된 URL을 생성하려면 다음과 같은 AWS CLI 명령을 사용할 수 있습니다.

aws s3 presign --expires-in (number of seconds) s3://(bucket name)/(path to file of data to load)

그러면 생성된 사전 서명된 URL을 LOAD 명령에 사용할 수 있습니다.

curl https://(a Neptune endpoint URL):8182/sparql \
  --data-urlencode 'update=load (pre-signed URL of the remote Amazon S3 file of data to be loaded) \
                           into graph (named graph)'

자세한 내용은 요청 인증: 쿼리 파라미터 사용을 참조하십시오. Boto3 문서는 Python 스크립트를 사용하여 미리 서명된 URL을 생성하는 방법을 보여줍니다.

또한 로드할 파일의 콘텐츠 유형을 올바르게 설정해야 합니다.

1. -metadata 파라미터를 사용하여 파일을 Amazon S3에 업로드할 때 해당 파일의 콘텐츠 유형을 다음과 같이 설정합니다.

   aws s3 cp test.nt s3://bucket-name/my-plain-text-input/test.nt --metadata Content-Type=text/plain
   aws s3 cp test.rdf s3://bucket-name/my-rdf-input/test.rdf --metadata Content-Type=application/rdf+xml

2. 미디어 유형 정보가 실제로 제공되는지 확인합니다. 실행합니다.

   curl -v bucket-name/folder-name

   이 명령의 출력은 파일을 업로드할 때 설정한 미디어 유형 정보를 표시해야 합니다.

3. 그러면 SPARQL UPDATE LOAD 명령을 사용하여 이러한 파일을 Neptune으로 가져올 수 있습니다.

   curl https://your-neptune-endpoint:port/sparql \
     -d "update=LOAD <https://s3.amazonaws.com/bucket-name/my-rdf-input/test.rdf>"

웹 서버에서 SPARQL UPDATE LOAD를 사용하여 파일을 Neptune에 로드

1. Neptune 및 로드할 파일을 호스팅하는 VPC 내에서 실행하는 시스템에 웹 서버를 설치합니다. 예를 들어 Amazon Linux를 사용하는 경우 다음과 같이 Apache를 설치할 수 있습니다.

   sudo yum install httpd mod_ssl
   sudo /usr/sbin/apachectl start

2. 로드할 RDF 파일 콘텐츠의 MIME 유형을 정의합니다. SPARQL은 웹 서버에서 보낸 Content-type 헤더를 사용하여 콘텐츠의 입력 형식을 결정하므로 웹 서버에 적합한 MIME 유형을 정의해야 합니다.

   예를 들어 다음 파일 확장명을 사용하여 파일 형식을 식별한다고 가정하겠습니다.

   • NTriples에 대해 .nt

   • NQuads에 대해 .nq

   • Trig에 대해 .trig

   • RDF/XML에 대해 .rdf

   • Turtle에 대해 .ttl

   • N3에 대해 .n3

   • JSON-LD에 대해 .jsonld

   Apache 2를 웹 서버로 사용하는 경우 /etc/mime.types 파일을 편집하고 다음 유형을 추가합니다.

    text/plain nt
    application/n-quads nq
    application/trig trig
    application/rdf+xml rdf
    application/x-turtle ttl
    text/rdf+n3 n3
    application/ld+json jsonld

3. MIME 유형의 매핑이 작동하는지 확인합니다. 웹 서버가 작동하고 실행 중이며 RDF 파일을 선택한 형식으로 호스팅하면 로컬 호스트에서 웹 서버로 요청을 보내 구성을 테스트할 수 있습니다.

   예를 들어 다음과 같이 요청을 보낼 수 있습니다.

   curl -v http://localhost:80/test.rdf

   그러면 curl의 자세한 출력에 다음과 같은 라인이 표시되어야 합니다.

   Content-Type: application/rdf+xml

   이는 콘텐츠 유형 매핑이 성공적으로 정의되었음을 보여줍니다.

4. 이제 SPARQL UPDATE 명령을 사용하여 데이터를 로드할 준비가 되었습니다.

   curl https://your-neptune-endpoint:port/sparql \
       -d "update=LOAD <http://web_server_private_ip:80/test.rdf>"