敏捷數(shù)據(jù)管理平臺(ADM)由管理控制中心(Master)、數(shù)據(jù)服務(wù)節(jié)點(CDMServer)、***服務(wù)節(jié)點(SDMServer)、客戶端(Client)組成,服務(wù)節(jié)點可通過主備節(jié)點部署實現(xiàn)高可用,通過靈活的橫向節(jié)點擴展實現(xiàn)功能擴展和容量擴充,每個服務(wù)節(jié)點可以安裝在物理服務(wù)器或虛擬服務(wù)器中。一個或多個客戶端連接到服務(wù)節(jié)點,組成一個完整的數(shù)據(jù)管理平臺,客戶端負責(zé)收集數(shù)據(jù)、傳輸數(shù)據(jù),服務(wù)節(jié)點負責(zé)接收數(shù)據(jù)、存儲數(shù)據(jù)、數(shù)據(jù)脫敏以及管理數(shù)據(jù)。敏捷數(shù)據(jù)管理平臺(ADM)由4個模塊組成:數(shù)據(jù)服務(wù)節(jié)點(CDMServer)包括數(shù)據(jù)備份模塊(PDM)、數(shù)據(jù)校驗?zāi)K(BDM)、數(shù)據(jù)交付模塊(TDM)3個模塊;***服務(wù)節(jié)點(SDMServer)包括數(shù)據(jù)脫敏模塊(SDM)1個模塊。上訊ADM產(chǎn)品通過虛擬數(shù)據(jù)秒級分發(fā)功能實現(xiàn)測試數(shù)據(jù)的同時在線交付,縮短了數(shù)據(jù)交付的時間。工商銀行CDM應(yīng)用
上訊敏捷數(shù)據(jù)管理平臺(ADM)既可以封裝在敏捷數(shù)據(jù)管理流程的中間環(huán)節(jié),也可以單獨作為敏感數(shù)據(jù)處理的抽取平臺,兩種模式滿足了當(dāng)前用戶對數(shù)據(jù)處理的全部需求。 提供系統(tǒng)用戶角色權(quán)限的配置管理,負責(zé)系統(tǒng)角色用戶功能的劃分,操作權(quán)限的分配,負責(zé)處理任務(wù)向上級的申請,上級用戶負責(zé)審批、轉(zhuǎn)發(fā)、會簽或駁回以及復(fù)核工作的需求。當(dāng)前系統(tǒng)內(nèi)置豐富的算法,具備廣義的通用型規(guī)則,包括字符替換、隨機生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機構(gòu)代碼等數(shù)據(jù)的有效性、可用性,算法經(jīng)優(yōu)化已處理超長字符截斷和重復(fù)數(shù)據(jù)的問題。人工操作流程繁瑣上訊ADM產(chǎn)品是集數(shù)據(jù)備份管理、備份校驗管理、數(shù)據(jù)副本管理、敏感數(shù)據(jù)處理四位一體的數(shù)據(jù)管理產(chǎn)品。
在數(shù)據(jù)收集和使用上,通過獲取一份具有應(yīng)用一致性保證的“黃金副本”,分鐘級虛擬化為多個副本直接掛載使用,數(shù)據(jù)使用效率明顯得到提升;在數(shù)據(jù)存儲和傳輸上,這些虛擬數(shù)據(jù)副本相對原始存儲幾乎不占用存儲空間(約為0),且ADM產(chǎn)品將全部數(shù)據(jù)集中存放在統(tǒng)一的存儲池中,既保證了數(shù)據(jù)傳輸流轉(zhuǎn)的閉環(huán)管控,又降低了數(shù)據(jù)的存儲成本;在數(shù)據(jù)加工上,數(shù)據(jù)脫離生產(chǎn)環(huán)境之前增設(shè)了敏感數(shù)據(jù)處理環(huán)節(jié),保障數(shù)據(jù)公開后的隱私安全,防止核心數(shù)據(jù)泄露;在數(shù)據(jù)的提供和公開上,虛擬數(shù)據(jù)副本可用于準(zhǔn)生產(chǎn)、測試環(huán)境等場景的數(shù)據(jù)交付,每一份虛擬數(shù)據(jù)都是互不影響的,并且可讀可寫,數(shù)據(jù)在經(jīng)過變更后可標(biāo)記快照,多個快照之間可以任意切換實現(xiàn)數(shù)據(jù)版本的管理。
上訊信息敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫虛擬化技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,在保證數(shù)據(jù)安全使用的同時,提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲成本。ADM由數(shù)據(jù)備份管理、備份校驗管理、數(shù)據(jù)副本管理、數(shù)據(jù)脫敏管理組成,實現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲管理和數(shù)據(jù)流程管理,通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價值。上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持全域重刪技術(shù),重刪指紋庫重建功能。
l數(shù)據(jù)壓縮存儲ADM支持同步數(shù)據(jù)壓縮,自動化地將同步數(shù)據(jù)按照3:1的比例壓縮,系統(tǒng)存儲空間顯示已壓縮的容量大小,存儲即壓縮。l自助式數(shù)據(jù)服務(wù)ADM不僅可以靈活地提供任意時間點的數(shù)據(jù),還可以對虛擬數(shù)據(jù)庫進行圖形化、自助式的管理。l虛擬數(shù)據(jù)庫集中管控虛擬數(shù)據(jù)庫集中管控是對虛擬數(shù)據(jù)庫在使用過程中的狀態(tài)進行管理,包括如下功能:①虛擬數(shù)據(jù)庫版本管理②虛擬數(shù)據(jù)庫共享管理③虛擬數(shù)據(jù)庫記錄查詢l敏感信息智能掃描ADM內(nèi)置敏感信息匹配庫,對數(shù)據(jù)庫的敏感信息進行智能定義掃描,成功發(fā)現(xiàn)后自動匹配成敏感類型,以匹配度和敏感信息類型進行靈活排序,避免漏掃。l關(guān)聯(lián)關(guān)系保持一致支持對數(shù)據(jù)庫中表間和表內(nèi)的約束信息和索引信息進行***,支持視圖、序列、觸發(fā)器、存儲過程等數(shù)據(jù)對象的抽取,保持***前后數(shù)據(jù)關(guān)系的一致。數(shù)據(jù)安全領(lǐng)域數(shù)據(jù)安全治理的產(chǎn)品有哪些?副本數(shù)據(jù)
上訊ADM專注于備份數(shù)據(jù)的合理合法開發(fā)利用。工商銀行CDM應(yīng)用
ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進行分組劃分的功能,將處理過的數(shù)據(jù)進行分組管理,從下游測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源-中游數(shù)據(jù)中轉(zhuǎn)-下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負責(zé)人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時,ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓撲結(jié)構(gòu)圖,可詳細了解數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進行預(yù)覽,通過可視化的結(jié)構(gòu)拓撲圖,幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,優(yōu)化數(shù)據(jù)資源的合理分配,可視化功能的動態(tài)展示將助力企業(yè)向著智能化數(shù)據(jù)安全治理的方向轉(zhuǎn)型。工商銀行CDM應(yīng)用