在數(shù)據(jù)收集和使用上,通過獲取一份具有應用一致性保證的“黃金副本”,分鐘級虛擬化為多個副本直接掛載使用,數(shù)據(jù)使用效率明顯得到提升;在數(shù)據(jù)存儲和傳輸上,這些虛擬數(shù)據(jù)副本相對原始存儲幾乎不占用存儲空間(約為0),且ADM產(chǎn)品將全部數(shù)據(jù)集中存放在統(tǒng)一的存儲池中,既保證了數(shù)據(jù)傳輸流轉(zhuǎn)的閉環(huán)管控,又降低了數(shù)據(jù)的存儲成本;在數(shù)據(jù)加工上,數(shù)據(jù)脫離生產(chǎn)環(huán)境之前增設了敏感數(shù)據(jù)處理環(huán)節(jié),保障數(shù)據(jù)公開后的隱私安全,防止核心數(shù)據(jù)泄露;在數(shù)據(jù)的提供和公開上,虛擬數(shù)據(jù)副本可用于準生產(chǎn)、測試環(huán)境等場景的數(shù)據(jù)交付,每一份虛擬數(shù)據(jù)都是互不影響的,并且可讀可寫,數(shù)據(jù)在經(jīng)過變更后可標記快照,多個快照之間可以任意切換實現(xiàn)數(shù)據(jù)版本的管理。上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持仿真的敏感數(shù)據(jù)處理。醫(yī)療國產(chǎn)化備份
上訊敏捷數(shù)據(jù)管理平臺(ADM)的主要技術(shù)是(1)ADM內(nèi)置獨有的高效壓縮存儲池,壓縮比高達3:1,存儲即壓縮,降低了基礎數(shù)據(jù)源獲取的存儲成本與持續(xù)增長的副本數(shù)據(jù)存儲成本。(2)ADM的數(shù)據(jù)庫虛擬化技術(shù),是通過獲取一份基礎數(shù)據(jù)源,快速拉起多份虛擬數(shù)據(jù)庫掛載給目標業(yè)務使用,虛擬數(shù)據(jù)庫拉起時幾乎不占用物理存儲空間,在實驗室測試環(huán)境下拉起一個10TB數(shù)據(jù)量的虛擬數(shù)據(jù)庫,只占用1GB左右的存儲空間,明顯節(jié)約了存儲成本和時間周期,因此針對開發(fā)測試場景,需要對同一份數(shù)據(jù)創(chuàng)建N份副本數(shù)據(jù)時,存儲成本節(jié)約近乎N倍。高效壓縮比國內(nèi)較早發(fā)布CDM領(lǐng)域的平臺型產(chǎn)品是上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品。
敏捷數(shù)據(jù)管理平臺ADM的關(guān)鍵技術(shù)如下:l***數(shù)據(jù)獲取方式數(shù)據(jù)獲取的目的是將不同的數(shù)據(jù)源實時或者按需同步到平臺內(nèi),根據(jù)不同類型的數(shù)據(jù)源,數(shù)據(jù)獲取方式分為三種,保證覆蓋全部數(shù)據(jù)源獲取方式:①支持實時同步應用數(shù)據(jù)庫;②支持按需同步關(guān)系型數(shù)據(jù)庫;③支持與備份系統(tǒng)對接恢復數(shù)據(jù)。l核心專利技術(shù)—數(shù)據(jù)庫虛擬化技術(shù)ADM內(nèi)置一套數(shù)據(jù)庫虛擬化管理程序,虛擬數(shù)據(jù)庫是通過一份基礎數(shù)據(jù)源創(chuàng)建的數(shù)據(jù)副本,一份基礎數(shù)據(jù)源可以生成多個虛擬數(shù)據(jù)庫,虛擬數(shù)據(jù)庫可讀可寫,虛擬數(shù)據(jù)庫狀態(tài)可實時保存。虛擬數(shù)據(jù)庫創(chuàng)建時間為分鐘級,且不占用額外的存儲空間。
上訊敏捷數(shù)據(jù)管理平臺(ADM)既可以封裝在敏捷數(shù)據(jù)管理流程的中間環(huán)節(jié),也可以單獨作為敏感數(shù)據(jù)處理的抽取平臺,兩種模式滿足了當前用戶對數(shù)據(jù)處理的全部需求。 提供系統(tǒng)用戶角色權(quán)限的配置管理,負責系統(tǒng)角色用戶功能的劃分,操作權(quán)限的分配,負責處理任務向上級的申請,上級用戶負責審批、轉(zhuǎn)發(fā)、會簽或駁回以及復核工作的需求。當前系統(tǒng)內(nèi)置豐富的算法,具備廣義的通用型規(guī)則,包括字符替換、隨機生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機構(gòu)代碼等數(shù)據(jù)的有效性、可用性,算法經(jīng)優(yōu)化已處理超長字符截斷和重復數(shù)據(jù)的問題。上訊ADM產(chǎn)品通過虛擬數(shù)據(jù)秒級分發(fā)功能實現(xiàn)測試數(shù)據(jù)的同時在線交付,縮短了數(shù)據(jù)交付的時間。
企業(yè)開發(fā)需求更新頻繁,對測試環(huán)境和測試數(shù)據(jù)提出了同步變更的要求,ADM的虛擬數(shù)據(jù)庫快照功能解決了測試數(shù)據(jù)版本迭代的問題,通過對數(shù)據(jù)庫狀態(tài)進行定時或即時的記錄,保留當前虛擬數(shù)據(jù)庫的狀態(tài)作為測試數(shù)據(jù)版本,一旦需要調(diào)用某個版本時,只需切換到不同時間點的虛擬庫快照即可,靈活實現(xiàn)測試數(shù)據(jù)版本的任意切換,ADM還支持創(chuàng)建和維護虛擬庫級聯(lián)快照,滿足回歸測試等具體應用場景,通過這一功能明顯提升了開發(fā)測試效率、升級迭代效率。國內(nèi)排名靠前的CDM廠商是哪家?kafka地址
上訊ADM產(chǎn)品采用副本數(shù)據(jù)管理CDM面向數(shù)據(jù)全生命周期進行數(shù)據(jù)安全管理。醫(yī)療國產(chǎn)化備份
上訊敏捷數(shù)據(jù)管理平臺ADM功能支持自適應源端的全局重刪算法與策略,支持任務級與全局指紋庫;針對文件備份提供文件粒度與塊級粒度的全域重刪且支持重刪指紋庫重建功能,支持多線程文件備份,支持海量小文件場景下的聚合策略,提供并行掃描和高速索引,從而減少需要備份的數(shù)據(jù)量、縮短備份窗口、節(jié)省備份數(shù)據(jù)傳輸所消耗的網(wǎng)絡帶寬以及節(jié)約備份數(shù)據(jù)存儲空間;備份傳輸過程采用壓縮加密處理,緩解網(wǎng)絡傳輸?shù)膲毫Γ黾泳W(wǎng)絡抖動或短時間斷鏈的超時容錯機制,確保備份數(shù)據(jù)的安全。醫(yī)療國產(chǎn)化備份