一、Spark Streaming基礎?
?? ?
1、Spark Streaming簡介
?? ?
2、Spark Streaming的特點
?? ?
3、Spark Streaming的內部結構
?? ?
4、小小案例:wordcount程序:NetworkWordCount
?? ?
5、開發自己的NetworkWordCount
二、Spark Streaming進階?
?? ?
1、StreamingContext 對象詳解
?? ?
2、離散流: DStream
?? ?
3、DStream的轉換操作
?? ?
4、窗口操作
?? ?
5、DStream的輸入:基本數據源
?? ?
6、DStream的輸出操作和foreachRDD的設計模式
?? ?
7、DataFrame和SQL操作
?? ?
8、緩存和持久化
?? ?
9、檢查點
三、高級數據源?
?? ?
1、集成Flume
?? ?
2、集成Kafka
四、性能優化?
?? ?
1、減少批數據的執行時間
?? ?
2、如何設置批的容量
?? ?
3、內存調優