#Spark

실시간 데이터 파이프라인에서 Kafka와 Spark는 어떻게 함께 작동하는가

Real-Time User Data Analysis 아키텍처를 기반으로 Kafka(메시지 브로커)와 Spark Structured Streaming(스트림 처리 엔진)의 작동 원리와 둘의 생산자-소비자 관계를 정리한다.