資料
串流處理 (Stream Processing)
是什麼
串流處理在資料持續產生時就逐筆或以小時間窗即時處理,而不是先累積成一批再處理(批次處理)。常見工具有 Kafka、Flink、Spark Streaming。
解決什麼問題
需要秒級或毫秒級反應的情境,例如 IoT 即時監控、詐欺偵測、即時推薦的特徵更新。
考場 Trigger
- 大量裝置資料需即時監控
- 毫秒級反應與即時告警
- 即時行為特徵要立即更新
容易搞混
中級深度
能依「大量」「即時」「完整保存」條件組合架構:分散式平台、串流處理、邊緣運算與資料湖各司其職。