【廣告】
大數(shù)據(jù)中心建設(shè)——公共維度模型層(CDM)
存放明細(xì)事實(shí)數(shù)據(jù)、維表數(shù)據(jù)及公共指標(biāo)匯總數(shù)據(jù),其中明細(xì)事實(shí)數(shù)據(jù)、維表數(shù)據(jù)一般根據(jù)ODS層數(shù)據(jù)加工生成;公共指標(biāo)匯總數(shù)據(jù)一般根據(jù)維表數(shù)據(jù)和明細(xì)事實(shí)數(shù)據(jù)加工生成。
CDM層又細(xì)分為DWD層和DWS層,大數(shù)據(jù)中心文化建設(shè)費(fèi)用,分別是明細(xì)數(shù)據(jù)層和匯總數(shù)據(jù)層,采用維度模型方法作為理論基礎(chǔ),更多地采用一些維度退化手法,將維度退化至事實(shí)表中,減少事實(shí)表和維表的關(guān)聯(lián),提高明細(xì)數(shù)據(jù)表的易用性;同時(shí)在匯總數(shù)據(jù)層,運(yùn)動(dòng)大數(shù)據(jù)中心文化建設(shè)費(fèi)用,加強(qiáng)指標(biāo)的維度退化,采取更多的寬表化手段構(gòu)建公共指標(biāo)數(shù)據(jù)層,提升公共指標(biāo)的復(fù)用性,減少重復(fù)加工。其主要功能如下。
組合相關(guān)和相似數(shù)據(jù):采用明細(xì)寬表,復(fù)用關(guān)聯(lián)計(jì)算,智能云大數(shù)據(jù)中心文化建設(shè)費(fèi)用,減少數(shù)據(jù)掃描。
公共指標(biāo)統(tǒng)一加工:基于OneData體系構(gòu)建命名規(guī)范、口徑一致和算法統(tǒng)一的統(tǒng)計(jì)指標(biāo),為上層數(shù)據(jù)產(chǎn)品、應(yīng)用和服務(wù)提供公共指標(biāo);建立邏輯匯總寬表。
建立一致性維度:建立一致的數(shù)據(jù)分析維表,降低數(shù)據(jù)計(jì)算口徑、算法不統(tǒng)一的風(fēng)險(xiǎn)。
大數(shù)據(jù)中心建設(shè)的基本原則
高內(nèi)聚和低耦合——一個(gè)邏輯或者物理模型由哪些記錄和字段組成,應(yīng)該遵循基本的軟件設(shè)計(jì)方法的高內(nèi)聚和低耦合原則。主要從數(shù)據(jù)業(yè)務(wù)特性和訪問(wèn)特性?xún)蓚€(gè)角度來(lái)考慮:將業(yè)務(wù)相近或者相關(guān)、粒度相同的數(shù)據(jù)設(shè)計(jì)為一個(gè)邏輯或者物理模型;將高概率同時(shí)訪問(wèn)的數(shù)據(jù)放一起,智能云大數(shù)據(jù)中心文化建設(shè)費(fèi)用,將低概率同時(shí)訪問(wèn)的數(shù)據(jù)分開(kāi)存儲(chǔ)。
命名清晰、可理解——表命名需清晰、一致,表名需易于消費(fèi)者理解和使用。
大數(shù)據(jù)中心建設(shè)——方案介紹
方案建立多個(gè)關(guān)鍵技術(shù)上,他們無(wú)縫銜接地收集一方數(shù)據(jù)、對(duì)接多方數(shù)據(jù) 源、分析和細(xì)分?jǐn)?shù)據(jù),并激發(fā)和應(yīng)用數(shù)據(jù)。 通過(guò)APEX NEXUS 合并多埋點(diǎn)、觸點(diǎn)及數(shù)據(jù)源的功能,企業(yè)能夠有一個(gè)統(tǒng)一的視角,以及結(jié)合分析工具,將他們的一方數(shù)據(jù)轉(zhuǎn)化為洞察,用于各種業(yè)務(wù)功能。
北京中科匯成科技有限公司致力于大數(shù)據(jù)中心建設(shè)行業(yè)技術(shù)服務(wù),北京中科匯成科技有限公司竭誠(chéng)為您服務(wù)!
企業(yè): 北京中科匯成科技有限公司
手機(jī): 13011846930
電話(huà): 010-56036900
地址: 北京市豐臺(tái)區(qū)西四環(huán)中路112號(hào)紫辰院