Cloudera Streaming
기업이 비즈니스 성과를 창출할 수 있도록 중요한 이벤트의 감지와 대응을 지원하는 실시간 분석 솔루션입니다.
Data-in-Motion Kubernetes 릴리스 자세히 보기 웨비나 보기
개요
스트리밍이란?
Cloudera Streaming(구 Cloudera Stream Processing)은 스트리밍 데이터에서 복잡한 패턴을 분석하고 실행 가능한 인텔리전스를 확보할 수 있는 기능을 제공하여 고객이 스트림을 데이터 제품으로 전환할 수 있도록 지원합니다.
Apache Flink와 Kafka로 구동되며 완벽한 엔터프라이즈급 스트림 관리 및 상태 저장 처리 솔루션을 제공합니다. Kafka를 저장 스트리밍 기초로, Flink를 핵심 인스트림 처리 엔진으로 사용하고 SQL이나 REST와 같은 업계 표준 인터페이스에 대한 최고의 지원을 제공함으로써 개발자, 데이터 분석가, 데이터 과학자 등이 실시간 데이터 제품, 대시보드, 비즈니스 인텔리전스 앱, 마이크로서비스 및 데이터 과학 노트북을 구동하는 하이브리드 스트리밍 데이터 파이프라인을 손쉽게 구축할 수 있습니다.
사기 탐지, 네트워크 위협 분석, 제조 인텔리전스, 상거래 최적화, 실시간 제안, 즉각적인 대출 승인 등과 같은 사용 사례는 이러한 실시간 요구 사항을 해결하기 위해 데이터 처리 구성 요소를 스트림으로 이동시킴으로써 이제 가능하게 되었습니다.
Cloudara Streaming 기반의 하이브리드 스트리밍 데이터 파이프라인
Cloudera Streaming 사용 사례
- 사기 탐지
- 고객 분석
- 시장 모니터링
- 로그 분석
사기 탐지
금융 사기를 사전에 감지하여 수백만 달러의 손실을 예방합니다.
소매, 금융 서비스 및 기타 부문의 기업들은 고객 데이터 보호와 금융 사기 예방에 어려움을 겪고 있습니다. Cloudera Streaming은 실시간 고객 거래 스트림을 처리하고 패턴을 식별하며 예측 알림을 생성하고 잠재적 사기를 예방할 수 있는 기능을 제공합니다.
고객 분석
실시간 고객 분석으로 참여, 유지 및 만족도를 향상시킵니다.
모든 조직은 고객 참여 향상을 위해 실시간 분석을 필요로 하지만 과도한 데이터로 인해 이를 실행하는 데 어려움을 겪고 있습니다. Cloudera Streaming을 사용하면 1초 미만의 대기 시간으로 방대한 데이터양을 처리하는 동시에 고객 상호 작용을 감지하고 실시간으로 더 나은 제품을 추천하여 고객 분석을 실현합니다.
시장 모니터링
초당 수백만 건의 거래를 처리하고 금융 정보를 페타바이트 규모로 확장합니다.
증권 거래소는 실시간 보고 및 신속한 SLA 요건이라는 고객의 요구에 직면해 있습니다. 그러나 이러한 서비스를 제공하려면 페타바이트의 데이터를 처리해야 합니다. Cloudera Streams Messaging은 대량의 데이터를 쉽게 스트리밍할 수 있기 때문에 증권 거래소는 시장 기반 실시간 분석을 신속하게 생성하고 점점 더 까다로워지는 SLA를 충족할 수 있습니다.
로그 분석
실시간 분석을 위해 로깅 인프라를 현대화합니다.
로그 데이터는 기업에게 갈수록 중요한 자산이 되고 있습니다. 그러나 IT 조직은 효과적인 로그 수집 프로세스, 관련 정보의 업스트림 배포, 주요 지표 생성 등에 어려움을 겪고 있습니다. Cloudera Streaming이 가진 기능을 통해 로그 처리를 확장하고 기업 전반에 실시간 통찰력을 제공하며 운영 비용을 대폭 절감할 수 있습니다.
Cloudera Streaming 기능
-
Apache Flink 기반 Streaming Analytics
-
Apache Kafka 기반 Streams Messaging
Streaming Analytics
SQL Stream Builder와 함께 Apache Flink로 구동되는 Cloudera Streaming Analytics는 다음 사항을 제공합니다.
- 짧은 대기 시간 스트림 처리 기능
- REST 엔드포인트를 통해 업계 표준 SQL 및 APIS로 스트리밍 애플리케이션 작성을 허용하여 개발 단순화
- 정교한 이벤트 기반 분석을 구축하는 고급 윈도우 기술
- 멀티 클라우드 및 하이브리드 클라우드 모델 지원
주요 특징
스트림 메시징
Apache Kafka로 구동되는 Cloudera Streams Messaging은 다음 사항을 제공합니다.
- 클러스터 모니터링/운영을 위한 Streams Messaging Manager
- HA/DR 배포를 위한 Streams Replication Manager
- 중앙 집중식 스키마 관리를 위한 Schema Registry
- 간단한 데이터 이동과 변경 데이터 수집을 위한 Kafka Connect 및 지능형 재조정과 자가 치유를 위한 Cruise Control
- 멀티 클라우드 및 하이브리드 클라우드 모델 지원
주요 특징
유연한 배포 옵션으로 장소에 관계없이 모든 데이터를 사용
클라우드에서의 Cloudera Streaming
Cloudera는 퍼블릭 클라우드에 배포하여 효율적으로 확장할 수 있는 완벽한 통합 스트림 처리 기능 세트를 제공합니다.
Cloudera Streaming은 Apache Kafka 및 Apache Flink 엔진을 기반으로 구축되었으며 엔터프라이즈급 도구를 통해 배포와 관리를 간소화합니다.
Streams Messaging Manager는 스키마 거버넌스 및 모니터링, 재해 복구, 지능형 재조정, 강력한 액세스 제어 및 감사 등을 처리하는 일련의 기능으로 Apache Kafka를 확장합니다.
SQL Stream Builder는 강력한 SQL 콘솔로 Apache Flink를 확장하기 때문에 SQL 분석가는 스트리밍 데이터를 쿼리할 수 있고 다운스트림 애플리케이션용 제어 처리 로직에 대해 협업하고 버전 관리할 수 있습니다.
온프레미스에서의 Cloudera Streaming
Cloudera는 온프레미스에서 스트리밍 데이터로 실시간 파이프라인과 애플리케이션의 대기 시간을 최소화하고 비용을 제어합니다. Cloudera Streaming은 이러한 배포를 관리하는 데 필요한 엔터프라이즈 도구로 Apache Kafka와 Apache Flink를 통합합니다.
Cloudera Streaming - Kubernetes Operators
Cloudera Streaming 기능은 기존 Kubernetes 클러스터를 통해 독립적으로 배포할 수 있는 Kubernetes Operators로도 제공 되기 때문에 엔터프라이즈에 Kafka를 보다 손쉽게 배포하고 확장할 수 있습니다. Kubernetes Operator는 Kafka, Cruise Control, Zookeeper와 함께 제공되며, 강력한 메시지 브로커 서비스를 통해 Kubernetes에서 스트리밍 사용 사례를 구현합니다. 또한 Flink 및 SQL Stream Builder와 함께 제공되며, 컨테이너에서 네이티브로 실행되는 실시간 스트리밍 애플리케이션을 구축할 수 있는 최신 분산 스트림 처리 엔진을 지원합니다.
조금 더 자세히 살펴볼까요?
Cloudera Streaming 제품 둘러보기
Cloudera Streaming Community Edition
Cloudera Streaming Community Edition을 사용하면 스트림 프로세서를 쉽게 개발할 수 있으며 데스크탑이나 다른 개발 노드에서 이를 바로 수행할 수 있습니다.
분석가, 데이터 과학자, 개발자는 이제 새로운 기능을 평가하고 로컬에서 SQL 기반 스트림 프로세서를 개발하며 Kafka Consumers/Producers 및 Kafka Connect Connectors를 모두 로컬에서 개발한 후 프로덕션으로 이동합니다.
Streaming Community Edition으로 5분 안에 실행을 시작하세요.
참여하기
