地區數字化轉型之數據連接與匯聚.md

數據連接

  1. 各行業數據、政府業務數據、地區城市運行數據、互聯網數據,從離線、分散、零星采集,轉向隨時在線、邏輯集中、統一采集。
  2. 不同類型、不同協議的物聯網感知設施充分部署,促進物理空間、網絡空間、社會空間邊界融合下的數據流動,以信息資源調配物質資源,改善社會資源,打通虛實世界,形成感知-認知-操控-反饋的閉環機制;

數據匯聚

  1. 在數據持續連接基礎上,不斷豐富形成數據匯聚三類層次;
    • 全量數據:物理空間、網絡空間和社會空間數據的集合,
    • 全域數據:在全量數據基礎上,增加時間維度,形成時空數據,增加事件的軌跡、演變過程;
    • 全息數據:在全域時空數據基礎上,增加數據之間的關聯關系,形成主對象為核心的,數據融合、關聯網絡,打破因數據割裂造成的天然孤島,形成關聯數據的疊加價值。
  2. 數據匯聚的目標成效,是確保隨時可進行抽取、關聯與分析。與匯聚的物理地址無關,因為數據匯聚既可以邏輯集中,物理分散存儲,也可以物理集中存儲。
  • 前者,務必要按照統一規范和標準,對分散在不同物理地址的數據獨立清理,形成統一數據格式,隨時可供程序調用。這種方式要求各分散單元有數據清洗能力,或者通過第三方統一進行清洗。
  • 后者,可以將所有數據庫統一上云,形成天然的物理集中,不過云中存儲的數據依然屬于不同租戶,每個租戶存留的數據,并不天然互通共享,依然還需經過清洗處理后,方可統一調度。
  1. 一般而言,邏輯集中物理分散存儲更符合數據處理方向。但實際操作中,尤其是地方政府,往往采用統一上云的方式集中存儲,由專門的數據資源機構,如大數據資源管理局等,進行統一加工處理,這種方式更有利于工作推進,否則分散存儲在不同物理地點的數據,依然被各部門獨立把持,無法發揮數據效益。

貴州案例 :明確集中存儲更有利于數據統一調度;
上海案例: 通過對數據資源使用的地方立法,要求全量數據的集中歸集;

  1. 數據匯聚過程中,有兩類做法,
  • 第一類是構建全量數據資源目錄,劃分其中一部分作為可共享的資源目錄,對這部分數據資源進行獨立存放。
    • 優勢是數據資源目錄梳理有基礎,對業務的理解和依賴相對較小,每當有新業務和新共享需求時,再定期更新共享資源目錄。
    • 劣勢是全量數據的梳理工作量大,可共享的資源目錄更新不及時。
  • 第二類是按照業務主對象,形成多個主數據庫,破解過去數據屬性被不同部門、不同行業天然分割的困局。e.g 人事數據,包括黨建關系、調動關系、職稱評定、項目業績等,可以以單一的個人身份作為主對象,構建人事主數據庫。
    • 優勢:主數據庫天然有數據之間的依存關系,與業務息息相關,
    • 劣勢:各業務部門要明確形成主對象檔案,對業務部門提出專業要求。

數據分析

?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,401評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,011評論 3 413
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,263評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,543評論 1 307
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,323評論 6 404
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,874評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 42,968評論 3 439
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,095評論 0 286
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,605評論 1 331
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,551評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,720評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,242評論 5 355
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 43,961評論 3 345
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,358評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,612評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,330評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,690評論 2 370

推薦閱讀更多精彩內容