스트리밍 처리를 위한 Topic을 누구나 쉽게 콘솔 화면을 통해서 생성하고
이를 관리할 수 있도록 제공하고 있습니다.
사용자의 스트리밍 처리를 위한
메시지 큐에 대한 성능과 운영 지표를 시각적으로 확인할 수 있습니다.
Data Stream은 실시간으로 스트리밍 데이터를 수집하고 처리하는 데 최적화된 분산 메시지 큐인 kafka와의 호환성을 제공하는 완전 관리형 서버리스 서비스로, Apache Kafka의 모든 기능을 제공합니다
이를 통해, 기존의 Kafka 애플리케이션과 도구를 모두 연동하여 사용하실 수 있습니다.
사용된 리소스만큼만 비용을 부담할 수 있어 스트리밍 처리를 위해
필요한 비용을 합리적으로 운용할수 있습니다.
콘솔 화면을 통해 누구나 쉽게 Topic을 생성할 수 있으며, 이 때,사용량에 따라 적절한 파티션 수를 설정하여 사용자 요구에 맞는 처리를 할 수 있도록 제공하고 있습니다.
또한, 메시지 큐에 보관 기간을 설정하여, 불필요한 데이터에 대한 과금을 최소화할 수 있습니다.
Data Stream은 완전 관리형 서버리스 상품으로 Apache Kafka 버전 업그레이드, 파티션 재할당 또는 OS 패치와 같은 표준 유지 관리 작업을 더 이상 수행할 필요가 없습니다.
사용자의 전체 토픽에 대한 모니터링 대쉬보드를 제공하여, 여러 개의 토픽도 한 화면을 통해 모니터링하여 손쉽게 이슈를 발견할 수 있습니다.
이를 통해, 다수의 토픽을 운영에 대한 어려움을 간소화하여 손쉽게 운영할 수 있도록 하였습니다.
토픽 별로 컨슈머 그룹의 처리량을 확인하여, 손쉽게 운영 지표를 수립할 수 있습니다.
현재 메시지 큐에 인입되고 있는 데이터를 실시간으로 고객이 확인할 수 있도록 하여, 원하는 동작이 정상적으로 수행되고 있는 지를 실시간으로 확인이 가능합니다.
Data Stream은 Apache Kafka와의 높은 호환성을 제공하고 있어, Apache Kafka를 지원하는 Logstash 등의 다양한 Client를 포함하여기존에 운영 중인 Kafka Cluster와 연동 어플리케이션을 손쉽게 이전할 수 있습니다.
사용자의 스트리밍에 대해서 백업이나 처리를 위한 Storage가 필요한 경우 Object Storage 커넥터를 통해서 별도의 구성 없이도 몇 번의 클릭만으로도 사용자의 파이프라인을 완성할 수 있도록 제공하고 있습니다.
토픽 별로 메시지 보관 기간을 설정하여, 사용자 용도에 맞추어 토픽을 구성할 수 있습니다.
또한, 보관 기간을 설정하여, 불필요한 데이터에 대한 과금을 최소화할 수 있습니다.
사용자 환경에 맞추어 파티션을 설정하실 수 있으며, 이에
파티션의 수는 생성 이후에도 증가가 가능하기 때문에, 보다 유연하게 고객의 환경에 맞추어 구성이 가능합니다.
생성한 토픽을 분 단위로 이용 요금을 계산하여 청구됩니다.
월 단위 요금으로 토픽을 1개월 미만으로 사용하면 이용 요금은 일할 계산되어 청구됩니다.
저장된 데이터는 토픽의 메시지 보관 기간 설정에 따라 변경되어질 수 있습니다.
구분 | 과금 기준 | 요금 |
---|---|---|
파티션 개수 | 분 당 | - |
커넥터 개수 | - | |
저장된 데이터 | GB 당 | - |
데이터 수신 | - | |
데이터 송신 | - |
예) 한 달 동안 1개의 파티션을 이용하여, 초당 1MB의 데이터를 전송하고 Small Connector를 통해 Object Storage로 파일을 쓴 경우
(데이터 보존 기간은 24h)
파티션 비용 : 4.7원/분 * 1개 * 60분 * 24시 * 30일 = 203,040원
수신 비용 : 총 전송량은 1초당 1KB × 2,592,000초(한 달) = 2.47 GB 수신 비용 GB당 100이므로 2.47 * 100 = 247원
저장 비용 : 하루 평균 저장 용량은 2.47 / 30일 = 0.08GB 0.08 * 120원 = 9.88원
총 사용 요금은 203,040 + 247 + 9.88 = 203,296원