기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.
Amazon Data Firehose는 수신되는 스트리밍 데이터를 지정된 대상으로 전송하기 전에 수신 스트리밍 데이터를 특정 크기로 특정 기간 동안 버퍼링합니다. 새 Firehose 스트림을 생성하면서 버퍼 크기와 버퍼 간격을 구성하거나, 기존 Firehose 스트림의 버퍼 크기 및 버퍼 간격을 업데이트할 수 있습니다. 버퍼 크기는 MB 단위로 측정하며, 버퍼 간격은 초 단위로 측정합니다.
참고
동적 파티셔닝에는 무버퍼링 기능을 사용할 수 없습니다.
동적 파티셔닝이 활성화되면 Firehose는 구성된 버퍼링 힌트(크기 및 시간)에 따라 지정된 파티션에 속하는 레코드를 내부적으로 버퍼링한 다음 이 레코드를 Amazon S3 버킷으로 전송합니다. Firehose는 최대 크기의 객체를 전송하기 위해 내부에서 다단계 버퍼링을 사용합니다. 그에 따라, 레코드 배치의 종단 간 지연은 구성된 버퍼링 힌트 시간의 1.5배가 될 수 있습니다. 이는 Firehose 스트림의 데이터 최신성에 영향을 미칩니다.
활성 파티션 수는 전송 버퍼 내에 있는 총 활성 파티션 개수입니다. 예를 들어 동적 파티셔닝 쿼리가 초당 3개의 파티션을 구성하고 60초마다 전송을 트리거하도록 버퍼 힌트가 구성된 경우, 활성 파티션은 평균 180개가 됩니다. Firehose가 파티션의 데이터를 대상으로 전송할 수 없는 경우 이 파티션은 전송이 가능해질 때까지 전송 버퍼에서 활성 상태로 간주됩니다.
레코드 데이터 필드 및 S3 접두사 표현식에 따라 S3 접두사를 새 값으로 평가하면 새 파티션이 생성됩니다. 각각의 활성 파티션에 대해 새 버퍼가 생성됩니다. 동일하게 평가된 S3 접두사를 가진 모든 후속 레코드는 해당 버퍼에 전송됩니다.
버퍼가 버퍼 크기 제한 또는 버퍼 시간 간격에 도달하면, Firehose는 버퍼 데이터가 포함된 객체를 생성하여 이를 지정된 Amazon S3 접두사에 전송합니다. 객체가 전송된 후 해당 파티션의 버퍼와 파티션 자체가 삭제되고 활성 파티션 카운트에서 제거됩니다.
Firehose는 각 파티션별로 버퍼 크기나 간격이 충족되면 각 버퍼 데이터를 단일 객체로 전송합니다. 활성 파티션의 수가 Firehose 스트림당 한도인 500개에 도달하면 Firehose 스트림의 나머지 레코드는 지정된 S3 오류 버킷 접두사(activePartitionExceeded)로 전송됩니다. Amazon Data Firehose Limit
