Amazon MSK 개발자 안내서 시작 - Amazon Managed Streaming for Apache Kafka
Amazon MSK란 무엇입니까?

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Amazon MSK 개발자 안내서 시작

Amazon MSK 개발자 안내서를 시작합니다. 다음 주제는 수행하려는 작업에 따라 이 설명서 사용을 시작하는 데 도움이 될 수 있습니다.

하이라이트, 제품 세부 정보 및 요금은 Amazon MSK의 서비스 페이지를 참조하세요.

Amazon MSK란 무엇입니까?

Amazon Managed Streaming for Apache Kafka(Amazon MSK)는 Apache Kafka를 사용하여 스트리밍 데이터를 처리하는 애플리케이션을 구축하고 실행할 수 있는 완전 관리형 서비스입니다. AmazonMSK은 클러스터 생성, 업데이트 및 삭제와 같은 컨트롤 플레인 작업을 제공합니다. 따라서 데이터 생성 및 소비와 같은 Apache Kafka 데이터 영역 작업을 사용할 수 있습니다. Apache Kafka의 오픈 소스 버전을 실행합니다. 즉, 파트너와 Apache Kafka 커뮤니티의 기존 애플리케이션, 도구 및 플러그인이 지원되므로 애플리케이션 코드를 변경할 필요가 없습니다. AmazonMSK을 사용하여 아래에 나열된 Apache Kafka 버전을 사용하는 클러스터를 생성할 수 있습니다지원되는 Apache Kafka 버전.

이러한 구성 요소는 Amazon의 아키텍처를 설명합니다MSK.

  • 브로커 노드 - Amazon MSK 클러스터를 생성할 때 Amazon이 각 가용 영역에서 생성할 브로커 노드 수MSK를 지정합니다. 최소 값은 가용 영역당 브로커 1개입니다. 각 가용 영역에는 자체 가상 프라이빗 클라우드(VPC) 서브넷이 있습니다. Amazon MSK Provisioned는 및의Amazon MSK Standard 브로커 두 가지 브로커 유형을 제공합니다Amazon MSK Express 브로커. MSK Serverless에서는 트래픽을 처리하는 데 사용되는 브로커 노드를 MSK 관리하고 클러스터 수준에서만 Kafka 서버 리소스를 프로비저닝합니다.

  • ZooKeeper 노드 - Amazon은 Apache ZooKeeper 노드MSK도 생성합니다. Apache ZooKeeper 는 매우 안정적인 분산 조정을 지원하는 오픈 소스 서버입니다.

  • KRaft 컨트롤러 - Apache Kafka 클러스터의 메타데이터 관리를 위해 Apache를 대체KRaft하기 ZooKeeper 위해 개발된 Apache Kafka 커뮤니티입니다. KRaft 모드에서 클러스터 메타데이터는 ZooKeeper 노드 간이 아닌 Kafka 클러스터의 일부인 Kafka 컨트롤러 그룹 내에 전파됩니다. KRaft 컨트롤러는 추가 비용 없이 포함되므로 추가 설정이나 관리가 필요하지 않습니다.

    참고

    의 Apache Kafka 버전 3.7.x에서 ZooKeeper 모드 대신 KRaft 모드를 사용하는 클러스터를 생성할 MSK수 있습니다.

  • 생산자, 소비자 및 주제 생성자 - AmazonMSK을 사용하면 Apache Kafka 데이터 영역 작업을 사용하여 주제를 생성하고 데이터를 생성 및 소비할 수 있습니다.

  • 클러스터 작업의 AWS Management Console, AWS Command Line Interface (AWS CLI) 또는 APIs SDK를 사용하여 컨트롤 플레인 작업을 수행할 수 있습니다. 예를 들어 Amazon MSK 클러스터를 생성하거나 삭제하고, 계정의 모든 클러스터를 나열하고, 클러스터의 속성을 보고, 클러스터의 브로커 수와 유형을 업데이트할 수 있습니다.

Amazon은 클러스터에 대한 가장 일반적인 장애 시나리오를 MSK 감지하고 자동으로 복구하므로 생산자와 소비자 애플리케이션이 최소한의 영향으로 쓰기 및 읽기 작업을 계속할 수 있습니다. Amazon이 브로커 장애를 MSK 감지하면 장애를 완화하거나 비정상 또는 연결할 수 없는 브로커를 새 브로커로 교체합니다. 또한 가능한 경우 이전 브로커의 스토리지를 재사용하여 Apache Kafka가 복제해야 하는 데이터를 줄입니다. 가용성에 미치는 영향은 Amazon이 탐지 및 복구를 완료하는 MSK 데 필요한 시간으로 제한됩니다. 복구 후 생산자와 소비자 앱은 결함 이전에 사용한 것과 동일한 브로커 IP 주소와 계속 통신할 수 있습니다.