大數據平臺敏感數據處理

在國家大力發(fā)展信創(chuàng)的背景下,實現(xiàn)國產化軟硬件部署已成為企業(yè)的**訴求,其中逐步建立覆蓋國產化數據庫、操作系統(tǒng)、虛擬化平臺的國產化數據保護體系，實現(xiàn)備份數據自動化恢復驗證成為當前數據保護系統(tǒng)的迫切需求。同時，以金融和運營商行業(yè)為例，其開發(fā)測試部門需要頻發(fā)測試驗證，對數據使用頻率較高，因此形成了大量不同版本的測試數據，這部分數據體量龐大，動輒幾百GB甚至幾十TB，管理難度較大。國家日趨重視對數據隱私的安全管控，數據脫敏成為企業(yè)數據安全治理的重要方向。敏捷數據管理平臺 ADM是采用數據庫虛擬化等核*技術面向數據全生命周期的數據安全管理產品。大數據平臺敏感數據處理

在數據收集和使用上，通過獲取一份具有應用一致性保證的“黃金副本”，分鐘級虛擬化為多個副本直接掛載使用，數據使用效率明顯得到提升；在數據存儲和傳輸上，這些虛擬數據副本相對原始存儲幾乎不占用存儲空間（約為0），且ADM產品將全部數據集中存放在統(tǒng)一的存儲池中，既保證了數據傳輸流轉的閉環(huán)管控，又降低了數據的存儲成本；在數據加工上，數據脫離生產環(huán)境之前增設了敏感數據處理環(huán)節(jié)，保障數據公開后的隱私安全，防止核心數據泄露；在數據的提供和公開上，虛擬數據副本可用于準生產、測試環(huán)境等場景的數據交付，每一份虛擬數據都是互不影響的，并且可讀可寫，數據在經過變更后可標記快照，多個快照之間可以任意切換實現(xiàn)數據版本的管理。大數據平臺敏感數據處理ADM數據閉環(huán)式流轉與安全管控，保證了全生命周期數據資產管理。

敏捷數據管理平臺備份數據有效性驗證場景及價值：場景：備份數據是數據安全一道防線，大部分用戶在生產網絡中已部署了如NBU、Commvault等常見備份系統(tǒng)，為了保證備份數據的可恢復性及可用性，需要經常對備份數據做恢復校驗，而手動恢復校驗比較耗時耗力，因此導致了做備份數據恢復校驗的頻率不夠。價值：采用ADM實現(xiàn)備份數據的恢復校驗，可以將NBU、Commvault等備份系統(tǒng)的備份策略導入到ADM平臺中，并根據備份策略創(chuàng)建不同的恢復任務，且恢復任務可以進行恢復排期，幫助用戶實現(xiàn)自動化的周期性的備份數據恢復校驗，節(jié)約了大量的人力成本，且增加了備份數據恢復的頻率，為備份數據的可恢復性可用性提供了更好的保障。

敏捷數據管理平臺（Agile Data Management）簡稱ADM，是采用基于CDM（副本數據管理）的數據庫虛擬化技術，為企業(yè)上中下游數據的備份恢復、數據驗證、敏感數據處理、分發(fā)交付提供的面向數據全生命周期的安全管理解決方案，在保證數據安全使用的同時，提高了數據使用效率并降低了數據存儲成本。ADM由數據備份管理、備份校驗管理、數據副本管理、敏感數據處理管理組成，實現(xiàn)了數據復制容災、數據存儲管理和數據流程管理，通過自動化流程任務編排的方式實現(xiàn)了數據使用的成本控制、版本管理與開發(fā)利用，充分發(fā)揮了數據資產的潛在價值。ADM支持多線程文件備份，支持海量小文件場景下的聚合策略進行文件備份。

上訊敏捷數據管理平臺ADM對接用戶現(xiàn)有集中式備份系統(tǒng)服務器，實現(xiàn)恢復服務器、數據恢復策略、數據驗證策略和存儲資源的集中管理，包括：（1）存儲池自動準備存儲空間、自動調度創(chuàng)建恢復服務器；（2）按照參數設置恢復策略、自動執(zhí)行恢復計劃、自動驗證恢復數據；（3）恢復驗證任務結束后，自動清理恢復環(huán)境，釋放存儲資源和恢復服務器資源，用于下一個恢復驗證任務的使用，使整個數據備份恢復驗證工作能夠高效節(jié)能地循環(huán)利用，達到集中統(tǒng)一的安全管理。ADM可使數據分鐘級提供，提升數據交付效率縮短開發(fā)周期。kafka地址

目前，ADM備份數據恢復驗證管理功能實現(xiàn)了按計劃設定備份恢復任務并自動執(zhí)行，無需手動操作。大數據平臺敏感數據處理

上訊信息敏捷數據管理平臺的備份數據管理模塊，突破了傳統(tǒng)備份理念，基于特有的CDM數據庫虛擬化技術，不僅可以實現(xiàn)對數據庫的實時性持續(xù)備份以及本機、異機的快速恢復，還可以同時對備份數據的有效性進行驗證。對于已經部署了NBU/CommVault等備份系統(tǒng)的用戶，可以對接備份系統(tǒng)，實現(xiàn)存儲空間、恢復服務器和恢復任務的自動調度，從而實現(xiàn)備份數據有效性驗證的全自動化，并根據驗證結果生成詳細的恢復驗證報告。在恢復驗證任務結束后，自動清理恢復環(huán)境，釋放存儲資源和恢復服務器資源，以用于下一個恢復驗證任務的使用，使整個數據備份恢復驗證工作能夠周期性地循環(huán)運轉.大數據平臺敏感數據處理