Java中線程的狀態分為6種。 1.初始(NEW)：新創建了一個線程對象，但還沒有調用start()方法。 2.運行(RUNNABLE)：Java線程中將就緒（ready）和...
發簡信
IP屬地：上海
-
Java線程的6種狀態及切換（透徹講解）
-
數據結構之LinkList鏈表
鏈表與數組在數據結構的江湖上被并稱為南數組、北鏈表，其江湖地位可見一斑 概念 鏈表作為最基礎的通用存儲結構，它的作用和數組是一樣的，但存儲數據的方式略有不同。數組需要預先獲取...
-
Spark Streaming + Kafka + Redis狀態管理 top100場景 Exactly Once??最近面試螞蟻金服一面的時候，和面試官聊項目問題的時候，發現我這邊業務實現的top100場景好像沒有實現exactly once語義，我們項目的offset是存儲在zk中，...
-
Spark中的exactly once語義
exactly once指的是在處理數據的過程中，系統有很好的容錯性(fault-tolerance)，能夠保證數據處理不重不丟，每一條數據僅被處理一次。Spark具備很好的...
-
spark源碼閱讀之storage模塊②
在spark源碼閱讀之storage模塊①中，描繪了Storage模塊的整體框架是標準的master-slave框架：master用來管理slave的元數據信息，slave則...
-
spark源碼閱讀之storage模塊①Storage模塊負責管理spark在計算過程中產生的數據，對用戶來說，spark的編程面向的是RDD這種抽象的邏輯數據集，對RDD的轉換和動作完成對數據運算邏輯的處理。而在...
-
spark源碼閱讀之shuffle模塊②
在spark源碼閱讀之shuffle模塊①中，介紹了spark版本shuffle的演化史，提到了主要的兩個shuffle策略：HashBasedShuffle和SortedB...
-
spark源碼閱讀之shuffle模塊①我們在之前scheduler模塊的分析中了解到，DAGScheduler劃分stage的依據就是Shuffle Dependency，那么Shuffle是一個怎么樣的過程呢？...
