【廣告】
大數(shù)據(jù)中心建設的功能
數(shù)據(jù)管理
1.多源異構數(shù)據(jù)的統(tǒng)一管理、統(tǒng)一查詢等,支持字段級、行級權限控制
2.數(shù)據(jù)標簽管理,進行數(shù)據(jù)畫像及檢索應用
1.支持文件元數(shù)據(jù)定義, 及文件的上傳、預覽、導出控制
2.支持服務器磁盤、HDFS、Hbase等多種文件存儲方式
1. 數(shù)據(jù)有哪些、是什么、在哪里一目了然
2. 企業(yè)級結構化數(shù)據(jù)、非結構化數(shù)據(jù)統(tǒng)一的資源目錄,及數(shù)據(jù)查詢與申請
大數(shù)據(jù)中心建設的體系架構
業(yè)務板塊:根據(jù)業(yè)務的屬性劃分出幾個相對獨立的業(yè)務板塊,業(yè)務板塊之間的指標或業(yè)務重疊性較小。
規(guī)范定義:結合行業(yè)的數(shù)據(jù)倉庫建設經驗和自身數(shù)據(jù)特點,設計出的一套數(shù)據(jù)規(guī)范命名體系,規(guī)范定義將會被用在模型設計中。后面章節(jié)將會詳細說明。
模型設計:以維度建模理論為基礎,基于維度建??偩€架構,構建一致性的維度和事實(進行規(guī)范定義)。同時,在落地表模型時,基于自身業(yè)務特點,設計出一套表規(guī)范命名體系。
大數(shù)據(jù)中心建設應該遵循哪些基本原則?
核心模型與擴展模型分離——建立核心模型與擴展模型體系,核心模型包括的字段支持常用的核心業(yè)務,擴展模型包括的字段支持個性化或少量應用的需要,不能讓擴展模型的字段過度侵入核心模型,以免破壞核心模型的架構簡潔性與可維護性。
致性——具有相同含義的字段在不同表中的命名必須相同,必須使用規(guī)范定義中的名稱。