發簡信
IP屬地：北京
-
第十章 計算層優化之數據傾斜在MapReduce執行的過程中，會把任務的原始數據分片到多個Task中執行。想象以下場景，當任務的多數Task都在短時間內完成，只有個別Tas...
-
第十章 計算層優化之系統優化在大數據離線計算平臺上每天會有上萬個任務在執行，對cpu、內存、存儲資源由極大的消耗，那么如何降低資源使用率、提高計算效率，就涉及到計算優化的問...
-
第九章 事實表設計總結及補充三種事實表比較 1）事務事實表：記錄事務層面事實，跟蹤業務過程行為 2）周期快照表：記錄指定周期內一些聚集事務值或者度量狀態 3）累計快照表：通...
-
第九章 事實表設計之累計快照事實表累計快照事實表的主要用于研究事件之間時間間隔，當然并不僅限于此，還有一些特殊用途，可以在實際工作中靈活運用。 設計特點 1）數據不斷更新：不同于...
-
第九章 事實表設計之周期快照事實表想象以下場景，需要統計一個季度的商品成交量怎么取做？如果用一個季度內的事實事務表進行計算，雖然可以得出結果但是效率太低，在實際生產中并不可行，因...
-
第九章 事實表設計之事務事實表事務事實表用于跟蹤定義業務過程的個體行為 設計案例 場景：為交易事務設計事實表 1）業務分析：交易事務包括下單、支付、發貨、完結四個業務過程 2...
-
第九章 事實表設計之事實表基礎事實表特性 1）事實表描述了業務過程，包含引用的維度和業務的度量，與維度表相比數據量大得多，增長速度快得多 2）描述業務過程的細節程度稱為粒度 ...
-
第八章 維度設計之特殊維度遞歸層次 1）維度的遞歸層級即在維度分層的一種表現形式，如下： ① 類目維度，細分為葉子類目、三級類目、二級類目、一級類目② 地址類目，細分為區...
-
第八章 維度設計之維度變化維度變化的描述 與事實表變化相比，維度表變化相對緩慢，如何描述維度表的變化，有以下三種方式： 1）重寫維度值：這種方式直接覆蓋原數據 2）插入新...