Cloud Data Streaming Service 개요

기사 요약

이 요약이 도움이 되었나요?

의견을 보내 주셔서 감사합니다.

VPC 환경에서 이용 가능합니다.

Cloud Data Streaming Service 소개

네이버 클라우드 플랫폼 Cloud Data Streaming Service의 개념과 기본 구조를 설명합니다.

오픈 소스 Apache Kafka는 실시간 스트리밍 데이터 파이프라인 및 애플리케이션을 빌드를 위한 오픈 소스 플랫폼입니다.

Cloud Data Streaming Service를 통해 소프트웨어를 설치 및 유지 관리할 필요 없이 몇 분 만에 Kafka 클러스터를 구축할 수 있습니다.

Apache Kafka 클러스터 관리 도구인 오픈소스 Cluster Manager for Apache Kafka(CMAK)를 제공합니다.

CMAK는 클러스터, 토픽 등의 생성 및 변경, Consumer group 확인 등 Apache Kafka 클러스터 관리 기능을 제공합니다.

NAVER Cloud Platform의 "Cloud Data Streaming Service"는 Apache Kafka를 이용하고 있습니다. Apache 2.0 라이센스인 Apache Kafka를 설치하고 설정하여 클러스터 형태로 제공합니다.

Cloud Data Streaming Service 클러스터는 1대의 매니저 노드와 3대 이상의 브로커 노드로 구성되어 총 최소 4대의 서버로 구성됩니다. 브로커 노드의 수는 설치 시 원하는 만큼 늘릴 수 있습니다.

매니저 노드는 CMAK를 통해 Apache Kafka 클러스터를 관리합니다.
- 토픽 생성/삭제, 파티션 추가, 리발란스 등 Kafka 운영 관리에 편의를 제공합니다.
- Public Domain을 통해 CMAK에 접속할 수 있습니다.
브로커 노드는 실제 데이터가 저장되는 서버이며, 브로커 노드에 접근하기 위해서는 Cloud Data Streaming Service 클러스터를 생성한 VPC와 동일한 VPC에 사용자의 VM이 있어야 합니다.

이 문서가 도움이 되었습니까?

태그