時效性管理

來源: 發(fā)布時間:2024-09-28

l應(yīng)用數(shù)據(jù)一致性保障ADM主要應(yīng)用原生備份接口獲取具有應(yīng)用一致性保障的數(shù)據(jù),如針對Oracle,利用OracleRMAN和歸檔日志來保障備份數(shù)據(jù)庫數(shù)據(jù)的一致性;針對VMware虛擬化,利用VMwareSnapshot技術(shù)來保障備份虛擬機(jī)數(shù)據(jù)的一致性。l事務(wù)日志同步技術(shù)支持?jǐn)?shù)據(jù)庫的事務(wù)日志備份,事務(wù)日志是數(shù)據(jù)庫中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄,事務(wù)日志備份可將數(shù)據(jù)恢復(fù)到精確的故障點。例如:Oracle支持歸檔日志備份和刪除,MySQL數(shù)據(jù)庫支持redo日志備份和刪除等。l文件系統(tǒng)數(shù)據(jù)保護(hù)ADM支持備份非結(jié)構(gòu)化的文件系統(tǒng)。支持全量備份和長久增量備份與全量快照合成,備份策略采用定時執(zhí)行備份任務(wù),恢復(fù)策略支持細(xì)粒度恢復(fù),**小粒度為恢復(fù)單個文件。支持跨文件系統(tǒng)恢復(fù),例如恢復(fù)到EXT3、EXT4、NTFS等文件系統(tǒng)。ADM支持自適應(yīng)源端的全局重刪算法與策略,支持任務(wù)級與全局指紋庫。時效性管理

時效性管理,上訊敏捷數(shù)據(jù)管理平臺ADM

數(shù)據(jù)副本管理是ADM功能模塊之一,可單獨(dú)作為企業(yè)級副本數(shù)據(jù)管理(CDM)產(chǎn)品。為應(yīng)對當(dāng)前復(fù)雜的IT環(huán)境,ADM提出集云、物理、虛擬為一體的,面向結(jié)構(gòu)化數(shù)據(jù)庫、非結(jié)構(gòu)化數(shù)據(jù)、虛擬化和云平臺的***數(shù)據(jù)副本分發(fā)與交付管理解決方案。主要通過數(shù)據(jù)副本管理的核心專利技術(shù)——數(shù)據(jù)庫虛擬化技術(shù)對源數(shù)據(jù)進(jìn)行CDM原格式獲取生成黃金副本、存儲黃金副本作為基準(zhǔn)數(shù)據(jù)、虛擬化為多個副本掛載恢復(fù),**終達(dá)到快速交付副本數(shù)據(jù)、靈活管理副本數(shù)據(jù)版本、集中管理副本數(shù)據(jù)存儲與流轉(zhuǎn)的目標(biāo),是主要面向企業(yè)數(shù)據(jù)運(yùn)維、軟件開發(fā)測試部門解決自動化閉環(huán)取數(shù)供數(shù)、測試數(shù)據(jù)快速交付等典型應(yīng)用場景的問題。NFSADM針對數(shù)據(jù)的獲取采用壓縮存儲的方式,存儲池可壓縮至原來的三分之一,大*節(jié)約了數(shù)據(jù)存儲的成本。

時效性管理,上訊敏捷數(shù)據(jù)管理平臺ADM

備份是一個長期的過程,恢復(fù)往往只在事故發(fā)生后進(jìn)行,且備份數(shù)據(jù)的可恢復(fù)性、可用性在很大程度上依賴于備份數(shù)據(jù)的完整性。為了保證備份數(shù)據(jù)的可用性,很多企事業(yè)單位會定期進(jìn)行數(shù)據(jù)庫備份的恢復(fù)演練,也就是從備份數(shù)據(jù)中恢復(fù)出一套完整的數(shù)據(jù)庫。執(zhí)行備份數(shù)據(jù)的恢復(fù)操作,需要備份系統(tǒng)管理人員或者數(shù)據(jù)庫管理人員(DBA)對數(shù)據(jù)的備份恢復(fù)實現(xiàn)原理有深入的了解,并周期性地對備份數(shù)據(jù)進(jìn)行恢復(fù)操作,以保證備份數(shù)據(jù)的可恢復(fù)性與可用性。這種長期機(jī)械性、重復(fù)性的備份、恢復(fù)及驗證工作,無疑會占用DBA大量的時間和精力。在DBA界還流傳著這么一句話:“故障一定會發(fā)生,只是早晚的問題!”。作為一名DBA,只有時刻記得進(jìn)行備份和恢復(fù)校驗,才能避免某一天事故發(fā)生時出現(xiàn)難以挽回的悲劇.


ADM產(chǎn)品數(shù)據(jù)安全***ADM平臺支持靜態(tài)數(shù)據(jù)脫敏(涉及數(shù)據(jù)庫、格式化文件、數(shù)據(jù)庫對象、消息隊列等),內(nèi)置104條***算法、47條敏感信息類型匹配庫,覆蓋個人身份信息、組織機(jī)構(gòu)信息、資質(zhì)資格證信息、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息、車輛數(shù)據(jù)信息等眾多類別的敏感數(shù)據(jù)類型識別與仿真***。具備廣義的通用型***規(guī)則,包括字符替換、隨機(jī)生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型***規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機(jī)構(gòu)代碼等***后數(shù)據(jù)的有效性、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)***和基于ETL的抽取***,提供文件***添加水印功能,提供國產(chǎn)化操作系統(tǒng)的加密算法,滿足用戶多種***需求。ADM使數(shù)據(jù)存儲成本倍數(shù)級節(jié)約,提升數(shù)據(jù)存儲環(huán)節(jié)的效能。

時效性管理,上訊敏捷數(shù)據(jù)管理平臺ADM

敏捷數(shù)據(jù)管理平臺(ADM)由管理控制中心(Master)、數(shù)據(jù)服務(wù)節(jié)點(CDMServer)、***服務(wù)節(jié)點(SDMServer)、客戶端(Client)組成,服務(wù)節(jié)點可通過主備節(jié)點部署實現(xiàn)高可用,通過靈活的橫向節(jié)點擴(kuò)展實現(xiàn)功能擴(kuò)展和容量擴(kuò)充,每個服務(wù)節(jié)點可以安裝在物理服務(wù)器或虛擬服務(wù)器中。一個或多個客戶端連接到服務(wù)節(jié)點,組成一個完整的數(shù)據(jù)管理平臺,客戶端負(fù)責(zé)收集數(shù)據(jù)、傳輸數(shù)據(jù),服務(wù)節(jié)點負(fù)責(zé)接收數(shù)據(jù)、存儲數(shù)據(jù)、數(shù)據(jù)脫敏以及管理數(shù)據(jù)。敏捷數(shù)據(jù)管理平臺(ADM)由4個模塊組成:數(shù)據(jù)服務(wù)節(jié)點(CDMServer)包括數(shù)據(jù)備份模塊(PDM)、數(shù)據(jù)校驗?zāi)K(BDM)、數(shù)據(jù)交付模塊(TDM)3個模塊;***服務(wù)節(jié)點(SDMServer)包括數(shù)據(jù)脫敏模塊(SDM)1個模塊。ADM提出集云、物理、虛擬為一體的,面向結(jié)構(gòu)化、非結(jié)構(gòu)化、虛擬化的數(shù)據(jù)副本分發(fā)與交付管理解決方案。中信銀行采購的哪個廠商的CDM

ADM主要面向企業(yè)數(shù)據(jù)運(yùn)維、軟件開發(fā)測試部門解決自動化閉環(huán)取數(shù)供數(shù)、測試數(shù)據(jù)快速交付等應(yīng)用場景問題。時效性管理

敏捷數(shù)據(jù)存儲對數(shù)據(jù)處理環(huán)節(jié)中的數(shù)據(jù)存儲部分進(jìn)行了創(chuàng)新,采用獨(dú)特的壓縮存儲池存放備份數(shù)據(jù),將單獨(dú)的卷管理器和文件系統(tǒng)角色結(jié)合在一起,由文件系統(tǒng)掌握磁盤的基礎(chǔ)結(jié)構(gòu),傳統(tǒng)文件系統(tǒng)一次只能在單個磁盤上創(chuàng)建,如果有兩個磁盤,則必須創(chuàng)建兩個單獨(dú)的文件系統(tǒng),而卷管理器和文件系統(tǒng)的組合解決了這個問題,它允許創(chuàng)建許多共享可用存儲池的文件系統(tǒng)。該存儲池的優(yōu)勢之一是對磁盤物理布局的控制,當(dāng)將其他磁盤添加到池中時,現(xiàn)有文件系統(tǒng)可以自動增長,而新空間可用于所有文件系統(tǒng),即可以通過添加硬盤來增大池的存儲容量,進(jìn)行分區(qū)和格式化.時效性管理