在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中，根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后，會根據(jù)輸入側(cè)不同粒度（卷級、文件級、塊級）的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略，并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略，當前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法，通過對數(shù)據(jù)塊進行哈希算法的***標記，即指紋（Fingerprint），在指紋庫中尋找相同的指紋。如果存在相同指紋，則表示已保存了相同的數(shù)據(jù)塊，ADM則不再保存此數(shù)據(jù)塊，而是引用已存在的數(shù)據(jù)塊，從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù)，從而避免因修改數(shù)據(jù)位移而導致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問題，比較大限度地提升重刪性能和重刪率，為避免數(shù)據(jù)備份過程中冗余網(wǎng)絡(luò)傳輸與存儲開銷，在源端設(shè)置粗粒度前置數(shù)據(jù)校驗可以明顯縮小備份傳輸過程中的數(shù)據(jù)冗余，目的在于不備份任意一個冗余數(shù)據(jù)。上訊ADM專注于備份數(shù)據(jù)的合理合法開發(fā)利用。涉及業(yè)務(wù)系統(tǒng)繁多

ADM敏捷數(shù)據(jù)管理平臺產(chǎn)品是一款企業(yè)級CDM產(chǎn)品，通過以數(shù)據(jù)為中心，以安全為前提，以使用為導向，以敏捷為目的的產(chǎn)品理念，為企業(yè)提供一套面向上中下游數(shù)據(jù)高效使用與安全管控的數(shù)據(jù)安全治理解決方案。該解決方案在保證數(shù)據(jù)安全使用的前提下，可有力提高數(shù)據(jù)使用效率、降低數(shù)據(jù)存儲成本。ADM產(chǎn)品可幫助企業(yè)解決數(shù)據(jù)開發(fā)利用需求下，數(shù)據(jù)使用流轉(zhuǎn)環(huán)節(jié)遇到的安全性和效率問題，為企業(yè)的數(shù)據(jù)使用和管理建立了一套閉環(huán)式的數(shù)據(jù)安全流轉(zhuǎn)體系，為數(shù)據(jù)安全治理提供技術(shù)支撐.kafka連接上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持全域重刪技術(shù)，重刪指紋庫重建功能。

《數(shù)據(jù)安全法》第七條提出了國家鼓勵數(shù)據(jù)依法合理有效利用，保障數(shù)據(jù)依法有序自由流動的權(quán)益，即在高度重視數(shù)據(jù)安全的前提下，也要獲取數(shù)據(jù)合理利用帶來的價值，充分發(fā)揮數(shù)據(jù)作為關(guān)鍵要素的作用機制。數(shù)據(jù)的依法有序自由流動涉及數(shù)據(jù)處理的各個階段，包括數(shù)據(jù)的收集、存儲、使用、加工、傳輸、提供、公開等，各個階段構(gòu)成了數(shù)據(jù)活動的全生命周期，維護數(shù)據(jù)安全就是要維護數(shù)據(jù)從產(chǎn)生到銷毀的全生命周期各項處理活動的安全性.維護數(shù)據(jù)安全與促進數(shù)據(jù)開發(fā)利用是相輔相成、互相促進的關(guān)系，通過開展數(shù)據(jù)安全治理能夠為數(shù)據(jù)開發(fā)利用提供安全基礎(chǔ)保障，進而保障公民個人信息、組織的合法權(quán)益以及國家的安全，助力我國數(shù)字經(jīng)濟發(fā)展。

上訊敏捷數(shù)據(jù)管理平臺（ADM）數(shù)據(jù)復(fù)制容災(zāi)模塊主要包括數(shù)據(jù)遠程復(fù)制、數(shù)據(jù)異地容災(zāi)兩大功能點，是基于ADM系統(tǒng)底層的數(shù)據(jù)塊增量復(fù)制功能，全量復(fù)制傳輸，后續(xù)增量復(fù)制與全量快照合成傳輸，實現(xiàn)本地和異地均可以同時提供虛擬庫對外訪問。主要解決數(shù)據(jù)全生命周期管理中數(shù)據(jù)傳輸流轉(zhuǎn)的安全問題，基于數(shù)據(jù)備份任務(wù)和虛擬副本任務(wù)，將源數(shù)據(jù)和副本數(shù)據(jù)存儲到本地ADM的存儲池中，在本地ADM和遠端ADM之間創(chuàng)建遠程復(fù)制鏈路，根據(jù)遠程復(fù)制策略，將本地存儲池中的數(shù)據(jù)同步到遠端ADM存儲池中，從而為副本數(shù)據(jù)提供從上游到下游的安全傳輸路徑。上訊信息敏捷數(shù)據(jù)管理平臺為企業(yè)上中下游數(shù)據(jù)的高效使用、安全管控提供了一套綜合數(shù)據(jù)安全治理解決方案。

ADM兼容物理服務(wù)器、虛擬化、云平臺的備份源，降低因混合IT環(huán)境而需要多套數(shù)據(jù)保護方案帶來的成本壓力和管理復(fù)雜性。支持國產(chǎn)化操作系統(tǒng)，支持主流平臺下的數(shù)據(jù)庫、文件數(shù)據(jù)保護，支持主流虛擬化平臺的保護，支持國產(chǎn)云平臺的保護。通過數(shù)據(jù)庫虛擬化技術(shù)快速創(chuàng)建副本實現(xiàn)對備份數(shù)據(jù)的即時掛載恢復(fù)，提供業(yè)務(wù)應(yīng)急響應(yīng)能力和數(shù)據(jù)快速恢復(fù)能力，掛載恢復(fù)縮短了備份數(shù)據(jù)恢復(fù)的時間，可用于驗證備份數(shù)據(jù)的有效性，直接提升了數(shù)據(jù)恢復(fù)驗證的頻率。同時，ADM可與第三方備份系統(tǒng)對接，改變傳統(tǒng)手動編寫腳本恢復(fù)數(shù)據(jù)的方式，通過設(shè)置定時策略，自動化實現(xiàn)備份數(shù)據(jù)恢復(fù)的有效性驗證，協(xié)助企業(yè)建立高效的數(shù)據(jù)保護平臺。數(shù)據(jù)備份產(chǎn)品構(gòu)建了數(shù)據(jù)保護的基礎(chǔ)防線。kafka連接

信息敏捷數(shù)據(jù)管理平臺ADM包括生產(chǎn)數(shù)據(jù)備份、備份恢復(fù)校驗、敏感數(shù)據(jù)處理、數(shù)據(jù)副本管理四大功能模塊。涉及業(yè)務(wù)系統(tǒng)繁多

敏感數(shù)據(jù)處理是上訊敏捷數(shù)據(jù)管理平臺（ADM）產(chǎn)品功能模塊之一，主要針對敏感數(shù)據(jù)的處理使用，提供集敏感數(shù)據(jù)自動識別、仿真處理與數(shù)據(jù)交付為一體的敏感數(shù)據(jù)管理功能，覆蓋了敏感數(shù)據(jù)使用與管理的全部場景。針對敏感數(shù)據(jù)識別提供通用數(shù)據(jù)特征庫，敏感數(shù)據(jù)類型包括但不限于個人身份信息、組織機構(gòu)信息、資質(zhì)資格證信息、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息、車輛數(shù)據(jù)信息等眾多類別，支持全庫與子集自動掃描識別，包括數(shù)據(jù)內(nèi)容、字段類型、約束關(guān)系均可以實現(xiàn)自動識別，并依據(jù)類型特征加以分類；針對敏感數(shù)據(jù)的仿真處理，ADM內(nèi)置大量數(shù)據(jù)算法對敏感數(shù)據(jù)進行隨機化、模糊化替換，保證處理后數(shù)據(jù)的完整性、仿真性以及數(shù)據(jù)間的關(guān)聯(lián)關(guān)系保持不變，支持處理結(jié)果的校驗。涉及業(yè)務(wù)系統(tǒng)繁多