上訊敏捷數(shù)據(jù)管理平臺(ADM)支持重復(fù)數(shù)據(jù)刪除技術(shù),在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進行哈希算法的標記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因修改數(shù)據(jù)位移而導(dǎo)致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問題,較大限度地提升重刪性能和重刪率,為避免數(shù)據(jù)備份過程中冗余網(wǎng)絡(luò)傳輸與存儲開銷,在源端設(shè)置粗粒度前置數(shù)據(jù)校驗可以明顯縮小備份傳輸過程中的數(shù)據(jù)冗余,目的在于不備份任意一個冗余數(shù)據(jù)。數(shù)據(jù)安全領(lǐng)域的CDM是指拷貝數(shù)據(jù)管理。數(shù)據(jù)庫虛擬化收益對比
l應(yīng)用數(shù)據(jù)一致性保障ADM主要應(yīng)用原生備份接口獲取具有應(yīng)用一致性保障的數(shù)據(jù),如針對Oracle,利用OracleRMAN和歸檔日志來保障備份數(shù)據(jù)庫數(shù)據(jù)的一致性;針對VMware虛擬化,利用VMwareSnapshot技術(shù)來保障備份虛擬機數(shù)據(jù)的一致性。l事務(wù)日志同步技術(shù)支持數(shù)據(jù)庫的事務(wù)日志備份,事務(wù)日志是數(shù)據(jù)庫中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄,事務(wù)日志備份可將數(shù)據(jù)恢復(fù)到精確的故障點。例如:Oracle支持歸檔日志備份和刪除,MySQL數(shù)據(jù)庫支持redo日志備份和刪除等。l文件系統(tǒng)數(shù)據(jù)保護ADM支持備份非結(jié)構(gòu)化的文件系統(tǒng)。支持全量備份和長久增量備份與全量快照合成,備份策略采用定時執(zhí)行備份任務(wù),恢復(fù)策略支持細粒度恢復(fù),**小粒度為恢復(fù)單個文件。支持跨文件系統(tǒng)恢復(fù),例如恢復(fù)到EXT3、EXT4、NTFS等文件系統(tǒng)。一手數(shù)據(jù)資產(chǎn)上訊信息敏捷數(shù)據(jù)管理平臺ADM是創(chuàng)新型數(shù)據(jù)備份管理解決方案。
ADM產(chǎn)品數(shù)據(jù)安全***ADM平臺支持靜態(tài)數(shù)據(jù)脫敏(涉及數(shù)據(jù)庫、格式化文件、數(shù)據(jù)庫對象、消息隊列等),內(nèi)置104條***算法、47條敏感信息類型匹配庫,覆蓋個人身份信息、組織機構(gòu)信息、資質(zhì)資格證信息、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息、車輛數(shù)據(jù)信息等眾多類別的敏感數(shù)據(jù)類型識別與仿真***。具備廣義的通用型***規(guī)則,包括字符替換、隨機生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型***規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機構(gòu)代碼等***后數(shù)據(jù)的有效性、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)***和基于ETL的抽取***,提供文件***添加水印功能,提供國產(chǎn)化操作系統(tǒng)的加密算法,滿足用戶多種***需求。
ADM產(chǎn)品測試數(shù)據(jù)多副本快速交付ADM是國內(nèi)**早的副本數(shù)據(jù)管理(CDM)產(chǎn)品,采用數(shù)據(jù)庫虛擬化技術(shù)對原始數(shù)據(jù)庫副本(黃金副本)快速生成多個虛擬數(shù)據(jù)庫作為測試數(shù)據(jù)副本,滿足開發(fā)測試場景的測試數(shù)據(jù)快速供應(yīng)。?100倍數(shù)據(jù)交付效率提升10TB的數(shù)據(jù)恢復(fù)時間由原來的小時級縮短至分鐘級;?10倍工作效率提升在開發(fā)、測試環(huán)境中,使用者可隨時對虛擬庫做快照標記,快照對應(yīng)著不同時間的數(shù)據(jù)版本。數(shù)據(jù)版本管理可進行任意標記的快照切換,降低數(shù)據(jù)導(dǎo)入或恢復(fù)產(chǎn)生的時間成本,大幅提升工作效率。?10倍存儲空間節(jié)省首先內(nèi)置存儲池存儲即壓縮的機制可實現(xiàn)約3:1的數(shù)據(jù)存儲壓縮,同時交付的多個虛擬數(shù)據(jù)庫由于共享于一份原始數(shù)據(jù),因此基本不占用額外的存儲空間,隨著交付虛擬數(shù)據(jù)庫的數(shù)量增加,節(jié)約的存儲空間會成倍增加,實際應(yīng)用場景中至少為用戶節(jié)約10倍的存儲空間。敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品數(shù)據(jù)信創(chuàng)產(chǎn)品,實現(xiàn)了國產(chǎn)數(shù)據(jù)庫的備份與國產(chǎn)操作系統(tǒng)的兼容。
數(shù)據(jù)流程管理是ADM功能模塊之一,主要通過靈活配置數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)實現(xiàn)數(shù)據(jù)管理流程的自動化作業(yè)編排,ADM采用基于畫布的方式默認作業(yè)流程的起止節(jié)點,根據(jù)實際需求將數(shù)據(jù)的獲取、恢復(fù)、傳輸、共享、交付、銷毀等各個環(huán)節(jié)對應(yīng)的任務(wù)組件靈活拖動到作業(yè)畫布,組成一個完整的任務(wù)流程,各任務(wù)之間支持依賴關(guān)系、延時機制以及斷點處理機制,實現(xiàn)數(shù)據(jù)管理流程任務(wù)的串聯(lián)組建和并行執(zhí)行,達到數(shù)據(jù)管理流程的自動化執(zhí)行,協(xié)助用戶將數(shù)據(jù)交付流程的各個工作環(huán)節(jié)靈活地組合起來,實現(xiàn)數(shù)據(jù)交付的自動化,從而擺脫人工值守,達到縮減時間成本和人力成本的目標。敏捷數(shù)據(jù)管理平臺虛擬數(shù)據(jù)秒級分發(fā),提升了環(huán)境準備效率,數(shù)據(jù)交付時間整體節(jié)約100倍以上。備份恢復(fù)業(yè)務(wù)供給側(cè)
上訊信息敏捷數(shù)據(jù)管理平臺ADM包括PDM、BDM、SDM、CDM四大功能模塊。數(shù)據(jù)庫虛擬化收益對比
當前,有效的保障數(shù)據(jù)安全的方式仍然是數(shù)據(jù)備份,即企業(yè)針對生產(chǎn)業(yè)務(wù)的數(shù)據(jù)、文件制定備份策略生成備份數(shù)據(jù),一旦業(yè)務(wù)數(shù)據(jù)發(fā)生丟失或損壞,則恢復(fù)備份數(shù)據(jù)提供業(yè)務(wù)訪問,傳統(tǒng)的數(shù)據(jù)備份方案并未提供數(shù)據(jù)的恢復(fù)驗證手段,因此企業(yè)在發(fā)生數(shù)據(jù)丟失時,啟用備份數(shù)據(jù)恢復(fù)失敗的案例屢見不鮮,這也給各行業(yè)客戶造成了巨大的經(jīng)濟損失和不良的社會影響,為滿足法律的合規(guī)性要求,備份數(shù)據(jù)的恢復(fù)驗證成為備份恢復(fù)解決方案的必要需求,但由于備份數(shù)據(jù)量巨大、涉及業(yè)務(wù)系統(tǒng)繁多、專業(yè)人員數(shù)量有限,定期的備份數(shù)據(jù)恢復(fù)驗證仍然是一道難題,上訊敏捷數(shù)據(jù)備份恢復(fù)驗證解決方案為備份數(shù)據(jù)的恢復(fù)驗證提供了創(chuàng)新的技術(shù)手段,包括備份數(shù)據(jù)的分鐘級快速恢復(fù)、秒級可用性驗證、按計劃周期性定時自動恢復(fù)驗證,保障了備份數(shù)據(jù)的可恢復(fù)性與可用性。數(shù)據(jù)庫虛擬化收益對比