spark streaming可以用于批處理嗎
可以的,spark streaming主要四有四個方面。
能在故障報錯與straggler的情況下迅速恢復狀態;
更好的負載均衡與資源使用;
靜態數據集與流數據的整合和可交互查詢;
內置豐富高級算法處理庫(SQL、機器學習、圖處理)。
apache spark是什么
Apache Spark是一個強大的開源處理引擎,最初由Matei Zaharia開發,是他在加州大學伯克利分校的博士論文的一部分。
Apache Spark是快速、易于使用的框架,允許你解決各種復雜的數據問題,無論是半結構化、結構化、流式,或機器學習、數據科學。網頁鏈接