上訊敏捷數據管理平臺(ADM)支持重復數據刪除技術,在典型的重復數據刪除技術中,根據不同的數據備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據輸入側不同粒度(卷級、文件級、塊級)的數據采取不同的數據切分策略,并依據任務級與全局指紋庫提供自適應源端的全局重刪算法與策略,當前支持源端塊級、文件級重刪和并行重刪技術。源端重刪是采用基于內容的可變長數據切分算法,通過對數據塊進行哈希算法的標記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數據塊,ADM則不再保存此數據塊,而是引用已存在的數據塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數據和未修改的數據,從而避免因修改數據位移而導致的未修改數據切分到新數據塊中的問題,較大限度地提升重刪性能和重刪率,為避免數據備份過程中冗余網絡傳輸與存儲開銷,在源端設置粗粒度前置數據校驗可以明顯縮小備份傳輸過程中的數據冗余,目的在于不備份任意一個冗余數據。敏捷數據管理平臺為企業(yè)上、中、下游數據的高效使用提供了一套綜合數據安全治理解決方案。手機號碼變形
數字化時代,企業(yè)進行數據保護,不僅希望能夠實現本地數據保護,也要有災備中心進行異地數據保護。如此,即便本地數據中心遭遇地震、火災等重大自然災害或人為操作失誤等事故,導致本地備份數據或生產數據發(fā)生損壞或丟失時,能夠通過異地數據災備,確保數據可恢復。ADM支持通過遠程復制技術,將本地數據同步到異地災備中心,實現異地數據容災?;趥浞萑蝿眨瑢⑸a數據備份到本地的存儲池,基于遠程復制任務,將本地存儲池中的備份數據同步到異地存儲池中,從而為生產數據提供雙重保護,當本地生產數據、或備份數據丟失、損壞時,通過預先設置的容災策略,在容災端進行應急接管。原始數據格式海量數據供數于眾多場景的數據使用需求是上訊ADM的應用場景。
上訊敏捷數據管理平臺ADM功能支持自適應源端的全局重刪算法與策略,支持任務級與全局指紋庫;針對文件備份提供文件粒度與塊級粒度的全域重刪且支持重刪指紋庫重建功能,支持多線程文件備份,支持海量小文件場景下的聚合策略,提供并行掃描和高速索引,從而減少需要備份的數據量、縮短備份窗口、節(jié)省備份數據傳輸所消耗的網絡帶寬以及節(jié)約備份數據存儲空間;備份傳輸過程采用壓縮加密處理,緩解網絡傳輸的壓力,增加網絡抖動或短時間斷鏈的超時容錯機制,確保備份數據的安全。
ADM平臺具備根據管理人員、測試需求等內容的不同進行分組劃分的功能,將數據進行分組管理,從下游測試數據管理的源頭管控數據資源的類別,做到從源頭劃分類別,使下游測試數據管理形成上游數據源----中游數據中轉----下游數據目標的閉環(huán)式數據使用流程,規(guī)范化的數據流程使數據管理者成為數據的負責人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數據管理方案。同時,ADM提供對數據流轉的樹狀拓撲結構圖,可詳細了解數據的來源、所屬存儲池、掛載的測試服務器,以及數據快照的層級關系,方便對系統(tǒng)全局的數據使用結構進行預覽,通過可視化的結構拓撲圖,幫助用戶了解下游測試網中測試數據的歸屬關系,完善數據流轉路徑,優(yōu)化數據資源的合理分配,可視化功能的動態(tài)展示將助力企業(yè)向著智能化數據安全治理的方向轉型。敏捷數據管理平臺支持全庫與子集敏感數據處理,支持異構數據庫敏感數據替換,保證重要生產數據中間不落地。
上訊敏捷數據管理平臺產品為非生產環(huán)境中的數據使用提供了安全性保障。ADM內置了雙重敏感數據處理模式,一是通過基于虛擬數據庫的方式,實現在閉環(huán)供數流程中完成敏感數據的替換;二是數據抽取方式,支持從多種數據源中靈活抽取并進行變形處理。此外,ADM能夠自動發(fā)現敏感數據,智能定義敏感數據類型,并定位敏感數據源位置。結合豐富的算法和仿真字典庫,ADM不僅確保變形后的數據保持業(yè)務屬性,還保持了數據表間關系的業(yè)務一致性。為了集中管理數據使用流程,ADM跟蹤數據流向,識別虛擬數據庫的使用狀態(tài),實時拍攝快照,保留數據版本,實現了測試數據版本的快速回退,從而有助于對數據版本進行有效管理。多功能相結合確保非生產環(huán)境數據的安全使用,同時滿足企業(yè)對于數據安全性和合規(guī)性的需求。敏捷數據管理平臺是集數據備份管理、備份校驗管理、數據副本管理、敏感數據管理四位一體的數據管理產品。原始數據格式
敏捷數據管理平臺可實現備份數據任意時間點掛載恢復快速對恢復數據進行驗證。手機號碼變形
數據孤島指的是數據被分散、隔離和存儲在不同的系統(tǒng)、應用程序或部門中,使得數據之間無法有效地交流、共享或整合的情況。這些數據島嶼形成了一個個孤立的實體,難以互相連接或進行有效的數據分析。上訊敏捷數據管理平臺(ADM)通過有效整合企業(yè)內各業(yè)務系統(tǒng)的數據,實現數據采集、存儲、交付和管理的無縫對接,同時利用多項自主研發(fā)技術如數據庫虛擬化、數據備份恢復、敏感數據脫敏等,打破了企業(yè)內數據孤島現象,促進了數據資源的共享和高效利用。手機號碼變形