Amazon SQS의 FIFO 대기열 전송 로직 - Amazon Simple Queue Service
메시지 보내기메시지 수신다수의 재시도 횟수FIFO 동작에 대한 추가 참고 사항이해를 돕기 위한 예

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Amazon SQS의 FIFO 대기열 전송 로직

다음 개념은 특히 메시지 순서 및 메시지 그룹 ID를 처리할 때 Amazon SQS FIFO 대기열이 메시지 전송 및 수신을 처리하는 방법을 명확히 합니다. IDs

메시지 보내기

Amazon SQS FIFO 대기열은 고유한 중복 제거 IDs 및 메시지 그룹 IDs. 이 주제에서는 그룹 내에서 엄격한 순서를 유지하기 위한 메시지 그룹 IDs의 중요성을 강조하고 여러 생산자 간에 안정적이고 순서가 지정된 메시지 전송을 보장하기 위한 모범 사례를 강조합니다.

  1. 주문 보존

    • 여러 메시지가 고유한 메시지 중복 제거 IDs를 사용하여 FIFO 대기열로 연속으로 전송되는 경우 Amazon SQS는 메시지를 저장하고 전송을 승인합니다. 그런 다음 이러한 메시지는 전송된 정확한 순서로 수신되고 처리됩니다.

  2. 메시지 그룹 ID

    • FIFO 대기열에서 메시지는 메시지 그룹 ID를 기준으로 정렬됩니다. 여러 생산자 또는 스레드가 동일한 메시지 그룹 ID로 메시지를 전송하는 경우 Amazon SQS는 메시지가 도착한 순서대로 저장되고 처리되도록 합니다.

    • 모범 사례: 여러 생산자 간에 엄격한 메시지 순서를 보장하려면 각 생산자의 모든 메시지에 고유한 메시지 그룹 ID를 할당합니다.

  3. 그룹별 순서

    • FIFO 대기열 로직은 메시지 그룹 ID별로 적용됩니다.

      • 각 메시지 그룹 ID는 고유하고 순서가 지정된 메시지 그룹을 나타냅니다.

      • 메시지 그룹 ID 내에서 모든 메시지는 엄격한 순서로 전송 및 수신됩니다.

      • 메시지 그룹 IDs가 다른 메시지는 서로 비교하여 순서대로 도착하거나 처리될 수 있습니다.

    • 요구 사항 - 메시지 그룹 ID를 각 메시지와 연결해야 합니다. 그룹 ID 없이 메시지가 전송되면 작업이 실패합니다.

    • 단일 그룹 시나리오 - 모든 메시지를 엄격한 순서로 처리해야 하는 경우 모든 메시지에 동일한 메시지 그룹 ID를 사용합니다.

메시지 수신

Amazon SQS FIFO 대기열은 배치 처리, FIFO 주문 보장, 특정 메시지 그룹 IDs 요청 제한 등 메시지 검색을 처리합니다. 이 주제에서는 Amazon SQS가 엄격한 순서 지정 및 표시 규칙을 유지하면서 메시지 그룹 IDs 내부 및 전체에서 메시지를 검색하는 방법을 설명합니다.

  1. 배치 가져오기

    • 여러 메시지 그룹 IDs Amazon SQS

      • 단일 호출에서 동일한 메시지 그룹 ID로 가능한 한 많은 메시지를 반환하려고 시도합니다.

      • 다른 소비자가 다른 메시지 그룹 IDs 메시지를 동시에 처리하도록 허용합니다.

    • 중요한 설명

      • 동일한 메시지 그룹 ID에서 하나의 배치로 여러 메시지를 수신할 수 있습니다(MaxNumberOfMessages파라미터를 사용하여 단일 호출에서 최대 10개의 메시지).

      • 그러나 다음 시점까지는 후속 요청에서 동일한 메시지 그룹 ID로부터 추가 메시지를 수신할 수 없습니다.

        • 현재 수신된 메시지가 삭제되거나

        • 다시 표시됩니다(예: 표시 제한 시간이 만료된 후).

  2. FIFO 주문 보장

    • 배치로 검색된 메시지는 그룹 내에서 FIFO 순서를 유지합니다.

    • 동일한 메시지 그룹 ID에 사용할 수 있는 메시지가 10개 미만인 경우 Amazon SQS는 다른 메시지 그룹 IDs 메시지를 동일한 배치에 포함할 수 있지만 각 그룹은 FIFO 순서를 유지합니다.

  3. 소비자 제한 사항

    • 특정 메시지 그룹 ID에서 메시지를 수신하도록 명시적으로 요청할 수 없습니다.

다수의 재시도 횟수

생산자와 소비자는 메시지 순서를 중단하거나 중복을 도입하지 않고 Amazon SQS FIFO 대기열에서 실패한 작업을 안전하게 재시도할 수 있습니다. 이 주제에서는 중복 제거 IDs 및 제한 시간 초과가 재시도 중에 메시지 무결성을 보장하는 방법을 강조합니다.

  1. 생산자 재시도

    • SendMessage 작업이 실패하면 생산자는 동일한 메시지 중복 제거 ID로 메시지 전송을 여러 번 다시 시도할 수 있습니다.

    • 중복 제거 간격이 만료되기 전에 생산자가 하나 이상의 승인을 받는 한는 다음을 재시도합니다.

      • 중복 메시지를 도입하지 마십시오.

      • 메시지 순서를 중단하지 마십시오.

  2. 소비자 재시도

    • ReceiveMessage 작업이 실패하면 소비자는 동일한 수신 요청 시도 ID를 사용하여 필요한 횟수만큼 재시도할 수 있습니다.

    • 가시성 제한 시간이 만료되기 전에 소비자가 하나 이상의 승인을 받는 한는 다음을 재시도합니다.

      • 메시지 순서를 중단하지 마십시오.

FIFO 동작에 대한 추가 참고 사항

가시성 제한 시간 처리, 여러 메시지 그룹 IDs로 병렬 처리 활성화, 단일 그룹 시나리오에서 엄격한 순차 처리 보장에 대해 알아봅니다.

  1. 가시성 제한 시간 처리

    • 메시지가 검색되지만 삭제되지 않으면 표시 제한 시간이 만료될 때까지 표시되지 않습니다.

    • 첫 번째 메시지가 삭제되거나 다시 표시될 때까지 동일한 메시지 그룹 ID의 추가 메시지가 반환되지 않습니다.

  2. 동시성 및 병렬 처리

    • FIFO 대기열을 사용하면 다양한 메시지 그룹 IDs.

    • 동시성을 극대화하려면 독립적인 워크플로를 위해 여러 메시지 그룹 IDs로 시스템을 설계합니다.

  3. 단일 그룹 시나리오

    • FIFO 대기열의 모든 메시지를 엄격하게 순차적으로 처리하려면 대기열의 모든 메시지에 단일 메시지 그룹 ID를 사용합니다.

이해를 돕기 위한 예

다음은 Amazon SQS의 FIFO 대기열 동작을 보여주는 실용적인 시나리오입니다.

  1. 시나리오 1: 단일 그룹 ID

    • 생산자는 동일한 메시지 그룹 ID 그룹 A로 5개의 메시지를 보냅니다.

    • 소비자는 이러한 메시지를 FIFO 순서로 수신합니다. 소비자가 이러한 메시지를 삭제하거나 제한 시간 초과가 만료될 때까지 그룹 A의 추가 메시지는 수신되지 않습니다.

  2. 시나리오 2: 여러 그룹 IDs

    • 생산자는 그룹 A에 5개의 메시지를 보내고 그룹 B에 5개의 메시지를 보냅니다.

    • 소비자 1은 그룹 A의 메시지를 처리하는 반면 소비자 2는 그룹 B의 메시지를 처리합니다. 이렇게 하면 각 그룹 내에서 엄격한 순서를 유지하여 병렬 처리가 가능합니다.

  3. 시나리오 3: 배치 검색

    • 생산자가 그룹 A에 7개의 메시지를 보내고 그룹 B에 3개의 메시지를 보냅니다.

    • 단일 소비자는 최대 10개의 메시지를 검색합니다. 대기열에서 허용하는 경우 다음을 반환할 수 있습니다.

      • 그룹 A의 메시지 7개와 그룹 B의 메시지 3개(또는 단일 그룹에서 사용할 수 있는 메시지가 더 적은 경우 더 적음).