Spark Streaming將處理結果數據寫入Kafka
Spark 沒有直截有效的方式將消息發送到Kafka。java input.foreachRDD(rdd =>
// 不能在這裏建立KafkaProducer
rdd.foreachPartition(partition =>
partition.foreach {
case x: String => {
val props = new HashMap[
相關文章
- 1. 使用Spark Streaming處理Kafka數據流
- 2. 如何將spark streaming處理結果保存到關係型數據庫中
- 3. spark streaming 接收kafka數據寫入Hive分區表
- 4. kafka->spark->streaming->mysql（scala）實時數據處理示例
- 5. Spark Streaming 2.2.1 處理Kafka數據源的實戰準備
- 6. 使用 Kafka + Spark Streaming + Cassandra 構建數據實時處理引擎
- 7. Spark Streaming實時寫入數據到HBase
- 8. 【Spark Streaming】（四）基於 Spark Structured Streaming 的開發與數據處理
- 9. Spark Streaming寫數據到Redis
- 10. Spark將數據寫入Mysql
- 更多相關文章...
- • 錯誤處理 - RUST 教程
- • C# 異常處理 - C#教程
- • Flink 數據傳輸及反壓詳解
- • TiDB 在摩拜單車在線數據業務的應用和實踐
相關標籤/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
歡迎關注本站公眾號,獲取更多信息
相關文章
- 1. 使用Spark Streaming處理Kafka數據流
- 2. 如何將spark streaming處理結果保存到關係型數據庫中
- 3. spark streaming 接收kafka數據寫入Hive分區表
- 4. kafka->spark->streaming->mysql（scala）實時數據處理示例
- 5. Spark Streaming 2.2.1 處理Kafka數據源的實戰準備
- 6. 使用 Kafka + Spark Streaming + Cassandra 構建數據實時處理引擎
- 7. Spark Streaming實時寫入數據到HBase
- 8. 【Spark Streaming】（四）基於 Spark Structured Streaming 的開發與數據處理
- 9. Spark Streaming寫數據到Redis
- 10. Spark將數據寫入Mysql