Spark Stream 流式處理

總結:web Spark的核心數據結構是RDD(彈性分佈式數據集) Spark Streaming 採用微批處理模式,保證消息傳輸精準性,採用checkpoint方式保證可靠性,具備良好的吞吐性能,延時表現非真正實時 Spark Streaming 能夠接收Kafka和HDFS等在內的多種數據源,批量處理後,輸出到HDFS、數據庫或文件系統
相關文章
相關標籤/搜索