서비스 특징
데이터를 쉽게 탐색, 변환, 이동할 수 있는 서버리스 ETL/Pipeline 서비스
효율적인 데이터 변환 및 이동
데이터 변환 처리 및 이동을 자동화하여 데이터 통합 과정을 효율적으로 관리할 수 있으며, 데이터 분석, 머신 러닝, 데이터 시각화, 애플리케이션 개발 등 비즈니스 목적에 맞게 활용할 수 있도록 통합된 데이터를 제공합니다.
서버리스 데이터 통합 서비스
웹 서버, 데이터베이스, 파일, 애플리케이션 로그 등 여러 매체의 다양한 데이터 소스를 처리하는 파이프라인을 통해 효과적으로 데이터를 통합할 수 있는 서버리스 서비스입니다.
전용 Connected ETL 서비스를 통해서 보다 빠른 ETL JOB을 수행할 수 있습니다.
시각적 인터페이스로 코딩 없이 데이터 변환
다양한 소스에서 추출한 데이터를 필요한 형태와 구조로 변환하여 저장소로 전송할 수 있습니다. 이 모든 과정을 시각적인 인터페이스를 통해 코드 작성 없이 파이프라인을 쉽게 구성하고 실행할 수 있습니다.
연동 부가 서비스
상세 기능
데이터 변환 및 파이프라인 생성
Data Flow 서비스를 통해 다양한 데이터 소스와 연결하고 변환 실행 할 수 있으며, 콘솔에서 제공하는 시각적 인터페이스로 워크플로를 생성해 일정에 따라 자동 실행하거나 필요 시 직접 실행할 수 있습니다.
커넥터를 이용한 데이터 수집
다양하고 복잡한 대규모의 데이터 소스에서 데이터를 수집하기 위해서는 많은 인력, 비용, 시간, 솔루션이 필요합니다. Data Flow 서비스의 커넥터를 이용하면 네이버 클라우드 플랫폼의 다양한 서비스들과의 연동을 통한 데이터 수집이 가능해 인적, 기술적 리소스를 간소화하고 효율화할 수 있습니다.
Connected ETL을 통한 빠른 효과적인 JOB 수행
고객 전용 ETL JOB Instance인 Connected ETL을 통해서 JOB Setup/Teardown 없이 생산성 높은 ETL JOB을 수행하실 수 있습니다.
요금
실용적인 서비스 구성과 시간 단위 종량제 요금 제공
구분 | 상세 | 과금 항목 | 과금 기준 | 요금 |
|---|---|---|---|---|
ETL 작업 | 작업 실행 시간 | 컨테이너 | 분 | - |
Connected ETL Instance | Instance 가동 시간 | Driver DPU 1x | 분 | - |
Connected ETL Instance | Instance 가동 시간 | Driver DPU 2x | 분 | - |
Connected ETL Instance | Instance 가동 시간 | Executor DPU 1x | 분 | - |
Connected ETL Instance | Instance 가동 시간 | Executor DPU 2x | 분 | - |
(VAT 별도)
"ETL 작업"은 4vCPU/8GB RAM 사양의 컨테이너로 실행하며, 작업에 투입된 컨테이너별로 실행 시간당 요금이 부과됩니다.
"ETL 작업" 실행에는 최소 2개의 컨테이너가 필요합니다.
"Connected ETL"은 4vCPU/8GB RAM 또는 8vCPU/16GB RAM 사양의 Driver와 Executor를 통해서 수행합니다.
"Connected ETL"은 1개의 Driver, 1개 이상의 Executor가 필요합니다.
"Connected ETL"은 실제 고객 전용의 Instance를 할당 받는 서비스입니다. ETL JOB을 수행하지 않더라도 Instance가 가동되어 있는 동안 요금이 부과됩니다.
ETL 작업 요금 예시
예시 1) Object Storage 서비스의 원시 데이터를 읽는 파이프라인을 한 달 동안 실행 시
실행 컨테이너 수: 2개, 매회 ETL 변환 시간: 5분 7초, 실행 횟수: 720회(매일 1시간 간격으로 실행, 30일 기준)로 가정할 경우,
(컨테이너 -/분 x 2개) x (((5분 x 60초) + 7초) x 720회 / 60초) = -
예시 2) Object Storage 서비스의 원시 데이터를 읽는 파이프라인을 한 달 동안 실행 시
실행 컨테이너 수: 3개, 매회 ETL 변환 시간: 3분 7초, 실행 횟수: 720회(매일 1시간 간격으로 실행, 30일 기준)로 가정할 경우,
(컨테이너 -/분 x 3개) x (((3분 x 60초) + 7초) x 720회 / 60초) = -
예시 3) Object Storage 서비스의 원시 데이터를 읽는 파이프라인을 한 달 동안 실행 시
실행 컨테이너 수: 2개, 매회 ETL 변환 시간: 20시간 10분 17초, 실행 횟수: 1회로 가정할 경우,
(컨테이너 -/분 x 2개) x (((20시간 x 60분 x 60초) + (10분 x 60초) + 17초) x 1회 / 60초) = -
Connected ETL Instance 요금 예시
예시 1) Driver DPU 1x 1개와 Executor DPU 1x 4개를 24시간 가동시
(Driver DPU 1x x 1 x {} /분 x 3600 x 24) + (Executor DPU 1x x 4 x {} / 분 x 3600 x 24 =
예시 2) Driver DPU 2x 1개와 Executor DPU 2x 4개를 24시간 가동시
(Driver DPU 2x x 1 x {} /분 x 3600 x 24) + (Executor DPU 2x x 4 x {} / 분 x 3600 x 24 =
