Storm 정리

Storm 이란

• 실시간 데이터 분석 및 이벤트 배치 처리

• Nimbus

  • Job Tracker 역할

  • Supervisor 노드에 작업 할당

  • 장애 조치

• Supervisor

  • Task Tracker 역할

  • 할당된 토폴로지를 worker process 에 구동

• Topology

  • 처리 흐름 정의 그래프

  • 각 객체마다 하나의 처리 로직(토폴로지) 포함

• 구성 요소

  • 스파우트

    • 외부 소스로부터 튜플을 가져와 스트림 생성

    • 생성된 스트림을 볼트로 전송

  • 볼트

    • 토폴리지의 처리 작업 담당

    • 데이터 전송 및 연산 처리, 데이터 쓰기

Storm 구조

 

 

 

---