【廣告】
大數(shù)據(jù)中心建設(shè)——硬件設(shè)備介紹
硬件設(shè)備主要指的是IT設(shè)備、電力設(shè)備。IT設(shè)備中,服務(wù)器、網(wǎng)絡(luò)設(shè)備、存儲(chǔ)設(shè)備、安全設(shè)備和光模塊等組成,其中服務(wù)器的采購(gòu)成本大,核心組件大體分三大項(xiàng)CPU、GPU和DRAM。因?yàn)椋酒杀驹诜?wù)器中的比例很高,并且隨著服務(wù)器的升級(jí),成本會(huì)逐漸提高。所以,服務(wù)器相關(guān)的芯片股還是不錯(cuò)的。電力設(shè)備主要指UPS、變壓器等,我們這里主要說(shuō)UPS。因?yàn)?,?shù)據(jù)中心本來(lái)就是一個(gè)靠電力工作的地方,UPS在這里的應(yīng)用可以說(shuō)是比較適合不過(guò)的。當(dāng)然,UPS在很多領(lǐng)域都得到的應(yīng)用,領(lǐng)域不同設(shè)備也不同。
大數(shù)據(jù)中心建設(shè)的定位及價(jià)值
大數(shù)據(jù)建設(shè)方法的核心是:從業(yè)務(wù)架構(gòu)設(shè)計(jì)到模型設(shè)計(jì),從數(shù)據(jù)研發(fā)到數(shù)據(jù)服務(wù),做到數(shù)據(jù)可管理、可追溯、可規(guī)避重復(fù)建設(shè)。
建設(shè)統(tǒng)一的、規(guī)范化的數(shù)據(jù)接入層(ODS)和數(shù)據(jù)中間層(DWD和DWS),通過(guò)數(shù)據(jù)服務(wù)和數(shù)據(jù)產(chǎn)品,完成服務(wù)于大數(shù)據(jù)系統(tǒng)建設(shè),即數(shù)據(jù)公共層建設(shè)。提供標(biāo)準(zhǔn)化的(Standard)、共享的(Shared)、數(shù)據(jù)服務(wù)(Service)能力,降低數(shù)據(jù)互通成本,釋放計(jì)算、存儲(chǔ)、人力等資源,以消除業(yè)務(wù)和技術(shù)之痛。
大數(shù)據(jù)中心建設(shè)的體系架構(gòu)
業(yè)務(wù)板塊:根據(jù)業(yè)務(wù)的屬性劃分出幾個(gè)相對(duì)獨(dú)立的業(yè)務(wù)板塊,業(yè)務(wù)板塊之間的指標(biāo)或業(yè)務(wù)重疊性較小。
規(guī)范定義:結(jié)合行業(yè)的數(shù)據(jù)倉(cāng)庫(kù)建設(shè)經(jīng)驗(yàn)和自身數(shù)據(jù)特點(diǎn),設(shè)計(jì)出的一套數(shù)據(jù)規(guī)范命名體系,規(guī)范定義將會(huì)被用在模型設(shè)計(jì)中。后面章節(jié)將會(huì)詳細(xì)說(shuō)明。
模型設(shè)計(jì):以維度建模理論為基礎(chǔ),基于維度建??偩€架構(gòu),構(gòu)建一致性的維度和事實(shí)(進(jìn)行規(guī)范定義)。同時(shí),在落地表模型時(shí),基于自身業(yè)務(wù)特點(diǎn),設(shè)計(jì)出一套表規(guī)范命名體系。
大數(shù)據(jù)中心建設(shè)的基本原則
高內(nèi)聚和低耦合——一個(gè)邏輯或者物理模型由哪些記錄和字段組成,應(yīng)該遵循基本的軟件設(shè)計(jì)方法的高內(nèi)聚和低耦合原則。主要從數(shù)據(jù)業(yè)務(wù)特性和訪問(wèn)特性兩個(gè)角度來(lái)考慮:將業(yè)務(wù)相近或者相關(guān)、粒度相同的數(shù)據(jù)設(shè)計(jì)為一個(gè)邏輯或者物理模型;將高概率同時(shí)訪問(wèn)的數(shù)據(jù)放一起,將低概率同時(shí)訪問(wèn)的數(shù)據(jù)分開(kāi)存儲(chǔ)。
命名清晰、可理解——表命名需清晰、一致,表名需易于消費(fèi)者理解和使用。