l應(yīng)用數(shù)據(jù)一致性保障ADM主要應(yīng)用原生備份接口獲取具有應(yīng)用一致性保障的數(shù)據(jù),如針對Oracle,利用OracleRMAN和歸檔日志來保障備份數(shù)據(jù)庫數(shù)據(jù)的一致性;針對VMware虛擬化,利用VMwareSnapshot技術(shù)來保障備份虛擬機(jī)數(shù)據(jù)的一致性。l事務(wù)日志同步技術(shù)支持?jǐn)?shù)據(jù)庫的事務(wù)日志備份,事務(wù)日志是數(shù)據(jù)庫中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄,事務(wù)日志備份可將數(shù)據(jù)恢復(fù)到精確的故障點(diǎn)。例如:Oracle支持歸檔日志備份和刪除,MySQL數(shù)據(jù)庫支持redo日志備份和刪除等。l文件系統(tǒng)數(shù)據(jù)保護(hù)ADM支持備份非結(jié)構(gòu)化的文件系統(tǒng)。支持全量備份和長久增量備份與全量快照合成,備份策略采用定時執(zhí)行備份任務(wù),恢復(fù)策略支持細(xì)粒度恢復(fù),**小粒度為恢復(fù)單個文件。支持跨文件系統(tǒng)恢復(fù),例如恢復(fù)到EXT3、EXT4、NTFS等文件系統(tǒng)。上訊信息敏捷數(shù)據(jù)管理平臺ADM包括PDM、BDM、SDM、CDM四大功能模塊。2022年度先進(jìn)會員單位
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持并行重刪技術(shù),通過在多個不同的節(jié)點(diǎn)上構(gòu)建指紋庫,并將指紋并行分布于多個節(jié)點(diǎn),采用內(nèi)存級指紋庫進(jìn)行重刪,所有指紋讀寫全部保存于內(nèi)存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫增大所導(dǎo)致的隨機(jī)IO壓力。以此識別并消除數(shù)據(jù)備份過程中數(shù)據(jù)源中重復(fù)的數(shù)據(jù),該技術(shù)適用于不同平臺中的文件、數(shù)據(jù)庫、虛擬機(jī)等不同應(yīng)用類型的數(shù)據(jù),可以大幅度減少需要傳輸?shù)臄?shù)據(jù)量,從而極大地節(jié)省數(shù)據(jù)傳輸帶寬,解決單點(diǎn)性能和存儲空間壓力。數(shù)據(jù)庫存儲過程抽取上訊ADM產(chǎn)品的可管理性體現(xiàn)在數(shù)據(jù)從上游到下游獲取、傳輸、流轉(zhuǎn)的集中式管理,同時可進(jìn)行版本管理。
ADM通過對管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分,將已經(jīng)數(shù)據(jù)進(jìn)行分組管理,從測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使測試數(shù)據(jù)管理形成數(shù)據(jù)源----數(shù)據(jù)中轉(zhuǎn)----數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為用戶提供安全的測試數(shù)據(jù)管理方案。敏捷數(shù)據(jù)管理平臺ADM提供對虛擬數(shù)據(jù)庫的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解測試數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及虛擬數(shù)據(jù)庫快照的上下級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進(jìn)行預(yù)覽,幫助用戶了解測試網(wǎng)中測試數(shù)據(jù)的使用關(guān)系,完善測試數(shù)據(jù)的組織結(jié)構(gòu),優(yōu)化測試數(shù)據(jù)的資源分配。
敏捷數(shù)據(jù)管理平臺(ADM)由管理控制中心(Master)、數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDM Server)、敏感數(shù)據(jù)處理服務(wù)節(jié)點(diǎn)(SDM Server)、客戶端(Client)組成,服務(wù)節(jié)點(diǎn)可通過主備節(jié)點(diǎn)部署實(shí)現(xiàn)高可用,通過靈活的橫向節(jié)點(diǎn)擴(kuò)展實(shí)現(xiàn)功能擴(kuò)展和容量擴(kuò)充,每個服務(wù)節(jié)點(diǎn)可以安裝在物理服務(wù)器或虛擬服務(wù)器中。一個或多個客戶端連接到服務(wù)節(jié)點(diǎn),組成一個完整的數(shù)據(jù)管理平臺,客戶端負(fù)責(zé)收集數(shù)據(jù)、傳輸數(shù)據(jù),服務(wù)節(jié)點(diǎn)負(fù)責(zé)接收數(shù)據(jù)、存儲數(shù)據(jù)、敏感數(shù)據(jù)處理以及管理數(shù)據(jù)。上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持仿真的敏感數(shù)據(jù)處理。
l核心專利技術(shù)—數(shù)據(jù)庫虛擬化(1)ADM內(nèi)置獨(dú)有的高效壓縮存儲池,壓縮比高達(dá)3:1,存儲即壓縮,***降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲成本與持續(xù)增長的副本數(shù)據(jù)存儲成本。(2)ADM的數(shù)據(jù)庫虛擬化技術(shù),是通過獲取一份基礎(chǔ)數(shù)據(jù)源,快速拉起多份虛擬數(shù)據(jù)庫掛載給目標(biāo)業(yè)務(wù)使用,虛擬數(shù)據(jù)庫拉起時幾乎不占用物理存儲空間,在實(shí)驗(yàn)室測試環(huán)境下拉起一個10TB數(shù)據(jù)量的虛擬數(shù)據(jù)庫,*占用1GB左右的存儲空間,明顯節(jié)約了存儲成本和時間周期,因此針對開發(fā)測試場景,需要對同一份數(shù)據(jù)創(chuàng)建N份副本數(shù)據(jù)時,存儲成本節(jié)約近乎N倍。數(shù)據(jù)備份產(chǎn)品構(gòu)建了數(shù)據(jù)保護(hù)的基礎(chǔ)防線。2022年度先進(jìn)會員單位
通過對接第三方備份系統(tǒng)進(jìn)行備份數(shù)據(jù)的自動化恢復(fù)校驗(yàn)有什么產(chǎn)品?2022年度先進(jìn)會員單位
數(shù)據(jù)備份面臨存儲成本高的問題,ADM采用內(nèi)置高效的壓縮存儲池存放數(shù)據(jù),壓縮比約為3:1,存儲即壓縮,降低了備份數(shù)據(jù)的存儲成本;其次,通過ADM的數(shù)據(jù)庫虛擬化技術(shù),一份基礎(chǔ)數(shù)據(jù)即可快速拉起多份虛擬數(shù)據(jù)庫,由于虛擬數(shù)據(jù)庫90%的數(shù)據(jù)均與原始數(shù)據(jù)相同,因此拉起時幾乎不占用額外的物理存儲空間,只對新增的寫操作計入容量占用,因此,隨著數(shù)據(jù)分發(fā)使用的場景和頻率增加,虛擬庫的數(shù)量越來越多,而存儲成本將會呈倍數(shù)級節(jié)約,例如針對同一份數(shù)據(jù)創(chuàng)建N個虛擬庫,傳統(tǒng)方法需要N倍的存儲空間占用,而通過ADM只需要占用近乎0TB的存儲空間,節(jié)約了數(shù)據(jù)存儲環(huán)節(jié)的資源和成本。2022年度先進(jìn)會員單位