Neptune 딕셔너리 가비지 컬렉션

Neptune은 속성 그래프 데이터에 대한 neptune_lab_mode 파라미터를 통해 활성화할 수 있는 사전 가비지 수집(GC)을 지원합니다. 가 활성화되지 않은 경우 속성 그래프 데이터만 있는 클러스터에 대해 활성화할 수 neptune_streams 있습니다. 이 활성화neptune_streams되어 있거나 만료되지 않은 neptune_streams 데이터가 있는 경우 기능이 자동으로 비활성화됩니다. 이 기능을 활성화하려면 라이터 인스턴스를 재부팅해야 합니다. 이 기능은 엔진 릴리스 1.4.3.0에서 사용할 수 있습니다.

활성화하면 사용하지 않는 사전 항목이 백그라운드 작업으로 정리됩니다. 를 줄이지 않고VolumeBytesUsed, 대신 새 삽입을 위해 인덱스의 공간을 확보합니다. 의 성장률은 딕셔너리 GC를 활성화할 때와 그렇지 않을 때에 비해 낮을 VolumeBytesUsed 수 있습니다.

사전 가비지 수집은 백그라운드에서 실행되며 모든 그래프 및 사전 데이터를 스캔하여 사용되지 않는 용어를 찾습니다. 데이터의 약 6%가 변경되면 시작 시 새 실행이 트리거됩니다. CPU, 버퍼 캐시, 로그 생성 실행 취소, 쓰기 I/O 작업과 같은 헤드 노드 리소스의 쿼리 스레드와 혼동되어 쿼리 처리량에 부정적인 영향을 미칠 수 있습니다. GC는 쿼리에 의해 적극적으로 접촉되지 않는 데이터를 스캔하므로 라이터 노드의 버퍼 캐시에 영향을 미칠 수 있습니다. 클러스터는 추가 쓰기 I/O 작업을 볼 수 있으며 GC가 새 삭제를 수행할 때 제거할 실행 취소 로그가 더 많아지므로 지표 값이 더 UndoLogListSize 높아질 수도 있습니다.

GC는 soft_delete 및의 두 가지 모드로 실행할 수 있습니다enabled. soft_delete 모드에서 실행하면 미사용 사전 항목이 삭제됨(soft_delete)으로 표시되지만 명시적으로 삭제되지는 않습니다. 이 모드는 백그라운드 작업을 켠 후 성능 특성을 이해하는 데에도 사용할 수 있습니다. 활성화된 모드를 사용하면 항목이 명시적으로 삭제됩니다('하드' 삭제). soft_delete 모드로 전환하기 전에 일정 기간 동안 enabled 모드에서 GC를 실행하는 것이 좋습니다.

사전 GC는 최대 16개의 동시성을 지원합니다(코어가 16개 이상인 시스템에서). 기본적으로 단일 스레드로 실행되지만 처음 활성화하면 더 높은 동시성으로 실행할 수 있습니다. 사전 GC 스레드(들)는 쿼리 스레드와 동일한 우선 순위로 실행되며 라이터의 리소스와 동등하게 경쟁합니다.

사전 GC는 DictionaryGCMode 키를 설정하여 neptune_lab_mode 파라미터를 통해 활성화할 수 있습니다. (disabled기본값), 또는 soft_delete의 세 가지 값을 사용할 수 있습니다enabled. 예를 들어 다음 코드 샘플은를 DictionaryGCMode로 설정합니다. soft_delete

neptune_lab_mode = 'DictionaryGCMode=soft_delete'

동시성 파라미터 DictionaryGCConcurrency는 선택 사항이며 1~16 사이의 값을 사용할 수 있습니다. 최소값인 16개보다 높은 값과 코어 수로 설정하면 동시성이 해당 값으로 제한됩니다.

neptune_lab_mode = 'DictionaryGCMode=soft_delete,DictionaryGCConcurrency=2'

사용 가능한 데이터가 몇 개 있으면 서버가 시작된 후 백그라운드에서 딕셔너리 GC 작업이 활성화됩니다. 엔진 상태는 딕셔너리 GC의 현재 상태를 표시합니다. 아래 표시된 예제 출력은 딕셔너리 GC가 soft_delete 모드에 있고 동시성 2로 실행 중임을 보여줍니다. 백그라운드 작업이 실행 중인 경우 사용되지 않는 사전 항목을 적극적으로 스캔하여 삭제하거나 새 삭제 세트가 새 GC 라운드를 트리거할 때까지 기다릴 수 있습니다.

"labMode":{"DictionaryGC":"{Mode=soft_delete,Concurrency=2}"}

다음 조건 중 하나라도 충족되면 사전 GC가 일시 중지됩니다.