石山園

摘要： Spark 作為一個基于內存的分布式計算引擎，其內存管理模塊在整個系統中扮演著非常重要的角色。理解 Spark 內存管理的基本原理，有助于更好地開發 Spark 應用程序和進行性能調優。本文旨在梳理出 Spark 內存管理的脈絡，拋磚引玉，引出讀者對這個話題的深入探討。本文中闡述的原理基于 Spar 閱讀全文

摘要： 這個版本是 Structured Streaming 的一個重要里程碑，因為其終于可以正式在生產環境中使用，實驗標簽（experimental tag）已經被移除。在流系統中支持對任意狀態進行操作；Apache Kafka 0.10 的 streaming 和 batch API支持讀和寫操作。除了 閱讀全文