上訊敏捷數(shù)據(jù)管理平臺(ADM)的主要技術(shù)是(1)ADM內(nèi)置獨有的高效壓縮存儲池,壓縮比高達3:1,存儲即壓縮,降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲成本與持續(xù)增長的副本數(shù)據(jù)存儲成本。(2)ADM的數(shù)據(jù)庫虛擬化技術(shù),是通過獲取一份基礎(chǔ)數(shù)據(jù)源,快速拉起多份虛擬數(shù)據(jù)庫掛載給目標(biāo)業(yè)務(wù)使用,虛擬數(shù)據(jù)庫拉起時幾乎不占用物理存儲空間,在實驗室測試環(huán)境下拉起一個10TB數(shù)據(jù)量的虛擬數(shù)據(jù)庫,只占用1GB左右的存儲空間,明顯節(jié)約了存儲成本和時間周期,因此針對開發(fā)測試場景,需要對同一份數(shù)據(jù)創(chuàng)建N份副本數(shù)據(jù)時,存儲成本節(jié)約近乎N倍。ADM支持多線程文件備份,支持海量小文件場景下的聚合策略進行文件備份。前后數(shù)據(jù)對比備份校驗管理是A...
上訊敏捷數(shù)據(jù)管理平臺(ADM)數(shù)據(jù)復(fù)制容災(zāi)模塊主要包括數(shù)據(jù)遠程復(fù)制、數(shù)據(jù)異地容災(zāi)兩大功能點,是基于ADM系統(tǒng)底層的數(shù)據(jù)塊增量復(fù)制功能,全量復(fù)制傳輸,后續(xù)增量復(fù)制與全量快照合成傳輸,實現(xiàn)本地和異地均可以同時提供虛擬庫對外訪問。主要解決數(shù)據(jù)全生命周期管理中數(shù)據(jù)傳輸流轉(zhuǎn)的安全問題,基于數(shù)據(jù)備份任務(wù)和虛擬副本任務(wù),將源數(shù)據(jù)和副本數(shù)據(jù)存儲到本地ADM的存儲池中,在本地ADM和遠端ADM之間創(chuàng)建遠程復(fù)制鏈路,根據(jù)遠程復(fù)制策略,將本地存儲池中的數(shù)據(jù)同步到遠端ADM存儲池中,從而為副本數(shù)據(jù)提供從上游到下游的安全傳輸路徑。上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品能對接NBU自動恢復(fù)。面向數(shù)據(jù)使用的應(yīng)用場景上訊敏捷數(shù)據(jù)管理...
在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當(dāng)前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進行哈希算法的***標(biāo)記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因...
信息化時代,“數(shù)據(jù)”的應(yīng)用較為頻繁,海量數(shù)據(jù)的組成中,備份數(shù)據(jù)占有很大比例,而這些備份數(shù)據(jù)在沒有發(fā)生故障時往往是被擱置不用的,被稱為“暗數(shù)據(jù)”。而對業(yè)務(wù)數(shù)據(jù)的分析、統(tǒng)計、運維等操作都會直接作用在業(yè)務(wù)服務(wù)器,如此將會對業(yè)務(wù)性能產(chǎn)生影響,不利于業(yè)務(wù)系統(tǒng)的高效使用。如何做到解放業(yè)務(wù)系統(tǒng),使其專注于業(yè)務(wù)處理上,也是IT管理者需要考慮的另一個現(xiàn)實問題。備份需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù),統(tǒng)計、分析需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù),研發(fā)、測試需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù)。這些數(shù)據(jù)從業(yè)務(wù)系統(tǒng)中拷貝出來后,如果得不到有效的管控,將會給企業(yè)帶來安全隱患,這也是用戶需要考慮解決的又一現(xiàn)實問題。ADM支持多線程文件備份,支持海量小文...
數(shù)據(jù)備份管理是ADM功能模塊之一,主要用于實現(xiàn)云環(huán)境、物理環(huán)境、虛擬化平臺下的***數(shù)據(jù)保護。包括支持各種主流平臺下的系統(tǒng)、數(shù)據(jù)庫及文件數(shù)據(jù)的保護,支持主流的虛擬化平臺、國產(chǎn)化云服務(wù)器以及容器的保護,并可對物理服務(wù)器及虛擬化平臺下的備份數(shù)據(jù)進行即時掛載恢復(fù),提供業(yè)務(wù)應(yīng)急的能力和數(shù)據(jù)快速恢復(fù)能力;針對數(shù)據(jù)備份的存儲資源類型,ADM***支持DAS(包括SSD/HDD)、SAN(包括IP-SAN/FC-SAN)、對象存儲等存儲資源。支持接入第三方云存儲、對象存儲等作為大容量數(shù)據(jù)存儲池,具備較強的擴展能力。數(shù)據(jù)備份產(chǎn)品構(gòu)建了數(shù)據(jù)保護的基礎(chǔ)防線。建表近年來,證券業(yè)務(wù)快速發(fā)展,信息系統(tǒng)變更日益頻繁,敏捷...
管理控制中心(Master)是ADM的集中管理和調(diào)度控制中心,是進行可視化管理的Web操作平臺。它負(fù)責(zé)集中管理ADM中的所有模塊組件,系統(tǒng)管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協(xié)調(diào)并執(zhí)行各個角色對應(yīng)的操作;數(shù)據(jù)服務(wù)節(jié)點(CDMServer)是提供數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)恢復(fù)驗證、副本數(shù)據(jù)創(chuàng)建和交付、數(shù)據(jù)復(fù)制容災(zāi)功能的服務(wù)節(jié)點。用于記錄數(shù)據(jù)服務(wù)任務(wù)的配置信息、存儲情況、歷史記錄等,數(shù)據(jù)服務(wù)節(jié)點統(tǒng)一通過MasterIP訪問;***服務(wù)節(jié)點(SDMServer)是提供數(shù)據(jù)脫敏的服務(wù)節(jié)點,用于記錄接入平臺的敏感數(shù)據(jù)源、數(shù)據(jù)脫敏策略、***任務(wù)記錄等信息,***服務(wù)節(jié)點統(tǒng)一通過Mas...
l應(yīng)用數(shù)據(jù)一致性保障ADM主要應(yīng)用原生備份接口獲取具有應(yīng)用一致性保障的數(shù)據(jù),如針對Oracle,利用OracleRMAN和歸檔日志來保障備份數(shù)據(jù)庫數(shù)據(jù)的一致性;針對VMware虛擬化,利用VMwareSnapshot技術(shù)來保障備份虛擬機數(shù)據(jù)的一致性。l事務(wù)日志同步技術(shù)支持?jǐn)?shù)據(jù)庫的事務(wù)日志備份,事務(wù)日志是數(shù)據(jù)庫中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄,事務(wù)日志備份可將數(shù)據(jù)恢復(fù)到精確的故障點。例如:Oracle支持歸檔日志備份和刪除,MySQL數(shù)據(jù)庫支持redo日志備份和刪除等。l文件系統(tǒng)數(shù)據(jù)保護ADM支持備份非結(jié)構(gòu)化的文件系統(tǒng)。支持全量備份和長久增量備份與全量快照合成,備份策略采用定時...
功能節(jié)點統(tǒng)一管理,支持彈性擴展ADM采用多節(jié)點高可用部署架構(gòu),保障數(shù)據(jù)服務(wù)高可用,并消除單節(jié)點故障導(dǎo)致的業(yè)務(wù)不可用問題,確保數(shù)據(jù)服務(wù)連續(xù)性。采用Scale-out架構(gòu),根據(jù)業(yè)務(wù)發(fā)展規(guī)模,按需擴展集群節(jié)點,無需停止服務(wù),靈活滿足業(yè)務(wù)需求。同時,ADM支持存儲池容量的彈性擴充,滿足不斷增長的數(shù)據(jù)存儲需求。(2)數(shù)據(jù)存儲成本倍數(shù)級節(jié)約,提升數(shù)據(jù)存儲環(huán)節(jié)的效能首先,數(shù)據(jù)備份面臨存儲成本高的問題,ADM采用內(nèi)置高效的壓縮存儲池存放數(shù)據(jù),壓縮比約為3:1,存儲即壓縮,***降低了備份數(shù)據(jù)的存儲成本;其次,通過ADM的數(shù)據(jù)庫虛擬化技術(shù),一份基礎(chǔ)數(shù)據(jù)即可快速拉起多份虛擬數(shù)據(jù)庫,由于虛擬數(shù)據(jù)庫90%的數(shù)據(jù)均與原...
當(dāng)前,有效的保障數(shù)據(jù)安全的方式仍然是數(shù)據(jù)備份,即企業(yè)針對生產(chǎn)業(yè)務(wù)的數(shù)據(jù)、文件制定備份策略生成備份數(shù)據(jù),一旦業(yè)務(wù)數(shù)據(jù)發(fā)生丟失或損壞,則恢復(fù)備份數(shù)據(jù)提供業(yè)務(wù)訪問,傳統(tǒng)的數(shù)據(jù)備份方案并未提供數(shù)據(jù)的恢復(fù)驗證手段,因此企業(yè)在發(fā)生數(shù)據(jù)丟失時,啟用備份數(shù)據(jù)恢復(fù)失敗的案例屢見不鮮,這也給各行業(yè)客戶造成了巨大的經(jīng)濟損失和不良的社會影響,為滿足法律的合規(guī)性要求,備份數(shù)據(jù)的恢復(fù)驗證成為備份恢復(fù)解決方案的必要需求,但由于備份數(shù)據(jù)量巨大、涉及業(yè)務(wù)系統(tǒng)繁多、專業(yè)人員數(shù)量有限,定期的備份數(shù)據(jù)恢復(fù)驗證仍然是一道難題,上訊敏捷數(shù)據(jù)備份恢復(fù)驗證解決方案為備份數(shù)據(jù)的恢復(fù)驗證提供了創(chuàng)新的技術(shù)手段,包括備份數(shù)據(jù)的分鐘級快速恢復(fù)、秒級可...
上訊敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM架構(gòu)的數(shù)據(jù)庫虛擬化等**技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案。該產(chǎn)品通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了備份數(shù)據(jù)的潛在價值。實現(xiàn)生產(chǎn)數(shù)據(jù)備份恢復(fù)與異地容災(zāi)、備份數(shù)據(jù)自動化恢復(fù)與有效性驗證、測試數(shù)據(jù)多副本快速交付、數(shù)據(jù)安全***。 通過網(wǎng)絡(luò)遠程掛載的方式,ADM將TB量級數(shù)據(jù)拉起時間控制在分鐘級,數(shù)據(jù)恢復(fù)的響應(yīng)速度極快。自動生成表名備份校驗管理是ADM功能模塊之一,...
備份是一個長期的過程,恢復(fù)往往只在事故發(fā)生后進行,且備份數(shù)據(jù)的可恢復(fù)性、可用性在很大程度上依賴于備份數(shù)據(jù)的完整性。為了保證備份數(shù)據(jù)的可用性,很多企事業(yè)單位會定期進行數(shù)據(jù)庫備份的恢復(fù)演練,也就是從備份數(shù)據(jù)中恢復(fù)出一套完整的數(shù)據(jù)庫。執(zhí)行備份數(shù)據(jù)的恢復(fù)操作,需要備份系統(tǒng)管理人員或者數(shù)據(jù)庫管理人員(DBA)對數(shù)據(jù)的備份恢復(fù)實現(xiàn)原理有深入的了解,并周期性地對備份數(shù)據(jù)進行恢復(fù)操作,以保證備份數(shù)據(jù)的可恢復(fù)性與可用性。這種長期機械性、重復(fù)性的備份、恢復(fù)及驗證工作,無疑會占用DBA大量的時間和精力。在DBA界還流傳著這么一句話:“故障一定會發(fā)生,只是早晚的問題!”。作為一名DBA,只有時刻記得進行備份和恢復(fù)...
在國家大力發(fā)展信創(chuàng)的背景下,實現(xiàn)國產(chǎn)化軟硬件部署已成為企業(yè)的**訴求,其中逐步建立覆蓋國產(chǎn)化數(shù)據(jù)庫、操作系統(tǒng)、虛擬化平臺的國產(chǎn)化數(shù)據(jù)保護體系,實現(xiàn)備份數(shù)據(jù)自動化恢復(fù)驗證成為當(dāng)前數(shù)據(jù)保護系統(tǒng)的迫切需求。同時,以金融和運營商行業(yè)為例,其開發(fā)測試部門需要頻發(fā)測試驗證,對數(shù)據(jù)使用頻率較高,因此形成了大量不同版本的測試數(shù)據(jù),這部分?jǐn)?shù)據(jù)體量龐大,動輒幾百GB甚至幾十TB,管理難度較大。國家日趨重視對數(shù)據(jù)隱私的安全管控,數(shù)據(jù)脫敏成為企業(yè)數(shù)據(jù)安全治理的重要方向。ADM在處理數(shù)據(jù)上中下游流轉(zhuǎn)的過程是集中統(tǒng)一的,通過全閉環(huán)式的傳輸保證了數(shù)據(jù)的安全。如何過濾不需要變形的數(shù)據(jù)傳統(tǒng)的備份方案大多采用周期性的“全量備份+...
組織內(nèi)部應(yīng)建立一套完善的數(shù)據(jù)備份恢復(fù)體系,部署相應(yīng)的數(shù)據(jù)備份恢復(fù)平臺,實現(xiàn)對生產(chǎn)數(shù)據(jù)的定期備份和恢復(fù)驗證。該平臺應(yīng)包括對備份數(shù)據(jù)進行定期的恢復(fù)驗證,周期間隔跨越日、月、季度、半年、年等,恢復(fù)驗證策略設(shè)置完畢可自動執(zhí)行,確保數(shù)據(jù)的可恢復(fù)性和可用性;該平臺應(yīng)能對長期存儲的備份數(shù)據(jù)進行時效性管理,針對數(shù)據(jù)的分享、存儲、使用和刪除設(shè)定有效期,過期存儲數(shù)據(jù)可進行刪除或再次授權(quán)使用;該平臺應(yīng)能對備份數(shù)據(jù)進行壓縮或加密存儲,保證存儲空間的有效利用.敏捷數(shù)據(jù)管理平臺ADM為企業(yè)上、中、下游數(shù)據(jù)的高效使用提供了一套綜合數(shù)據(jù)安全治理解決方案。文件到庫ADM支持Oracle/MySQL/DB2/SQLServer/...
在數(shù)據(jù)收集和使用上,通過獲取一份具有應(yīng)用一致性保證的“黃金副本”,分鐘級虛擬化為多個副本直接掛載使用,數(shù)據(jù)使用效率明顯得到提升;在數(shù)據(jù)存儲和傳輸上,這些虛擬數(shù)據(jù)副本相對原始存儲幾乎不占用存儲空間(約為0),且ADM產(chǎn)品將全部數(shù)據(jù)集中存放在統(tǒng)一的存儲池中,既保證了數(shù)據(jù)傳輸流轉(zhuǎn)的閉環(huán)管控,又降低了數(shù)據(jù)的存儲成本;在數(shù)據(jù)加工上,數(shù)據(jù)脫離生產(chǎn)環(huán)境之前增設(shè)了敏感數(shù)據(jù)處理環(huán)節(jié),保障數(shù)據(jù)公開后的隱私安全,防止核心數(shù)據(jù)泄露;在數(shù)據(jù)的提供和公開上,虛擬數(shù)據(jù)副本可用于準(zhǔn)生產(chǎn)、測試環(huán)境等場景的數(shù)據(jù)交付,每一份虛擬數(shù)據(jù)都是互不影響的,并且可讀可寫,數(shù)據(jù)在經(jīng)過變更后可標(biāo)記快照,多個快照之間可以任意切換實現(xiàn)數(shù)據(jù)版本的管理...
管理控制中心(Master)是ADM的集中管理和調(diào)度控制中心,是進行可視化管理的Web操作平臺。它負(fù)責(zé)集中管理ADM中的所有模塊組件,系統(tǒng)管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協(xié)調(diào)并執(zhí)行各個角色對應(yīng)的操作;數(shù)據(jù)服務(wù)節(jié)點(CDMServer)是提供數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)恢復(fù)驗證、副本數(shù)據(jù)創(chuàng)建和交付、數(shù)據(jù)復(fù)制容災(zāi)功能的服務(wù)節(jié)點。用于記錄數(shù)據(jù)服務(wù)任務(wù)的配置信息、存儲情況、歷史記錄等,數(shù)據(jù)服務(wù)節(jié)點統(tǒng)一通過MasterIP訪問;***服務(wù)節(jié)點(SDMServer)是提供數(shù)據(jù)脫敏的服務(wù)節(jié)點,用于記錄接入平臺的敏感數(shù)據(jù)源、數(shù)據(jù)脫敏策略、***任務(wù)記錄等信息,***服務(wù)節(jié)點統(tǒng)一通過Mas...
l數(shù)據(jù)壓縮存儲ADM支持同步數(shù)據(jù)壓縮,自動化地將同步數(shù)據(jù)按照3:1的比例壓縮,系統(tǒng)存儲空間顯示已壓縮的容量大小,存儲即壓縮。l自助式數(shù)據(jù)服務(wù)ADM不僅可以靈活地提供任意時間點的數(shù)據(jù),還可以對虛擬數(shù)據(jù)庫進行圖形化、自助式的管理。l虛擬數(shù)據(jù)庫集中管控虛擬數(shù)據(jù)庫集中管控是對虛擬數(shù)據(jù)庫在使用過程中的狀態(tài)進行管理,包括如下功能:①虛擬數(shù)據(jù)庫版本管理②虛擬數(shù)據(jù)庫共享管理③虛擬數(shù)據(jù)庫記錄查詢l敏感信息智能掃描ADM內(nèi)置敏感信息匹配庫,對數(shù)據(jù)庫的敏感信息進行智能定義掃描,成功發(fā)現(xiàn)后自動匹配成敏感類型,以匹配度和敏感信息類型進行靈活排序,避免漏掃。l關(guān)聯(lián)關(guān)系保持一致支持對數(shù)據(jù)庫中表間和表內(nèi)的約束信息和索引信息進...
ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進行分組劃分的功能,將處理過的數(shù)據(jù)進行分組管理,從下游測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源-中游數(shù)據(jù)中轉(zhuǎn)-下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時,ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進行預(yù)覽,通過可視化的結(jié)構(gòu)拓?fù)鋱D,幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,優(yōu)化...
數(shù)據(jù)資源可視化管理,有效滿足上中下游數(shù)據(jù)的政策合規(guī)ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進行分組劃分的功能,將***過的數(shù)據(jù)進行分組管理,從下游測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源----中游數(shù)據(jù)中轉(zhuǎn)----下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時,ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進行預(yù)覽,通過可視化的結(jié)構(gòu)拓?fù)鋱D,*...
上訊信息敏捷數(shù)據(jù)管理平臺的備份數(shù)據(jù)管理模塊,突破了傳統(tǒng)備份理念,基于特有的CDM數(shù)據(jù)庫虛擬化技術(shù),不僅可以實現(xiàn)對數(shù)據(jù)庫的實時性持續(xù)備份以及本機、異機的快速恢復(fù),還可以同時對備份數(shù)據(jù)的有效性進行驗證。對于已經(jīng)部署了NBU/CommVault等備份系統(tǒng)的用戶,可以對接備份系統(tǒng),實現(xiàn)存儲空間、恢復(fù)服務(wù)器和恢復(fù)任務(wù)的自動調(diào)度,從而實現(xiàn)備份數(shù)據(jù)有效性驗證的全自動化,并根據(jù)驗證結(jié)果生成詳細(xì)的恢復(fù)驗證報告。在恢復(fù)驗證任務(wù)結(jié)束后,自動清理恢復(fù)環(huán)境,釋放存儲資源和恢復(fù)服務(wù)器資源,以用于下一個恢復(fù)驗證任務(wù)的使用,使整個數(shù)據(jù)備份恢復(fù)驗證工作能夠周期性地循環(huán)運轉(zhuǎn).ADM備份數(shù)據(jù)恢復(fù)驗證管理功能對恢復(fù)資源進行統(tǒng)一集中化...
敏捷數(shù)據(jù)管理平臺ADM測試數(shù)據(jù)管理場景及價值場景:測試環(huán)境是數(shù)據(jù)使用**為頻繁的一個場景,涉及到數(shù)據(jù)交付、數(shù)據(jù)版本管理、數(shù)據(jù)安全管控等問題,也是數(shù)據(jù)治理**容易忽視的一個場景,做好測試數(shù)據(jù)的管理工作才會使得數(shù)據(jù)治理方案更加完善。價值:采用ADM實現(xiàn)測試數(shù)據(jù)管理,可以幫助用戶實現(xiàn)測試數(shù)據(jù)的分鐘級交付,提升百倍以上的數(shù)據(jù)交付能力;同時也可以幫助用戶節(jié)約十倍以上的存儲資源;可以幫助用戶實現(xiàn)測試數(shù)據(jù)的版本管理,杜絕僵尸數(shù)據(jù);同時也可以實現(xiàn)測試數(shù)據(jù)的集中統(tǒng)一管理,降低數(shù)據(jù)泄露的風(fēng)險.ADM通過提供虛擬數(shù)據(jù)庫作為容災(zāi)恢復(fù)數(shù)據(jù)庫可快速接管業(yè)務(wù),保持業(yè)務(wù)的連續(xù)性。備份數(shù)據(jù)自動校驗l分鐘級掛載恢復(fù)技術(shù)ADM壓縮...
在國家大力發(fā)展信創(chuàng)的背景下,實現(xiàn)國產(chǎn)化軟硬件部署已成為企業(yè)的**訴求,其中逐步建立覆蓋國產(chǎn)化數(shù)據(jù)庫、操作系統(tǒng)、虛擬化平臺的國產(chǎn)化數(shù)據(jù)保護體系,實現(xiàn)備份數(shù)據(jù)自動化恢復(fù)驗證成為當(dāng)前數(shù)據(jù)保護系統(tǒng)的迫切需求。同時,以金融和運營商行業(yè)為例,其開發(fā)測試部門需要頻發(fā)測試驗證,對數(shù)據(jù)使用頻率較高,因此形成了大量不同版本的測試數(shù)據(jù),這部分?jǐn)?shù)據(jù)體量龐大,動輒幾百GB甚至幾十TB,管理難度較大。國家日趨重視對數(shù)據(jù)隱私的安全管控,數(shù)據(jù)脫敏成為企業(yè)數(shù)據(jù)安全治理的重要方向。敏捷數(shù)據(jù)管理平臺ADM的核*專*技術(shù)——數(shù)據(jù)庫虛擬化技術(shù)。完整性原則敏捷數(shù)據(jù)管理平臺ADM的關(guān)鍵技術(shù)如下:l***數(shù)據(jù)獲取方式數(shù)據(jù)獲取的目的是將不同的...
在國家大力發(fā)展信創(chuàng)的背景下,實現(xiàn)國產(chǎn)化軟硬件部署已成為企業(yè)的**訴求,其中逐步建立覆蓋國產(chǎn)化數(shù)據(jù)庫、操作系統(tǒng)、虛擬化平臺的國產(chǎn)化數(shù)據(jù)保護體系,實現(xiàn)備份數(shù)據(jù)自動化恢復(fù)驗證成為當(dāng)前數(shù)據(jù)保護系統(tǒng)的迫切需求。同時,以金融和運營商行業(yè)為例,其開發(fā)測試部門需要頻發(fā)測試驗證,對數(shù)據(jù)使用頻率較高,因此形成了大量不同版本的測試數(shù)據(jù),這部分?jǐn)?shù)據(jù)體量龐大,動輒幾百GB甚至幾十TB,管理難度較大。國家日趨重視對數(shù)據(jù)隱私的安全管控,數(shù)據(jù)脫敏成為企業(yè)數(shù)據(jù)安全治理的重要方向。敏捷數(shù)據(jù)管理平臺 ADM是采用數(shù)據(jù)庫虛擬化等核*技術(shù)面向數(shù)據(jù)全生命周期的數(shù)據(jù)安全管理產(chǎn)品。大數(shù)據(jù)平臺敏感數(shù)據(jù)處理在數(shù)據(jù)收集和使用上,通過獲取一份具有應(yīng)...
上訊敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM架構(gòu)的數(shù)據(jù)庫虛擬化等**技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案。該產(chǎn)品通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了備份數(shù)據(jù)的潛在價值。實現(xiàn)生產(chǎn)數(shù)據(jù)備份恢復(fù)與異地容災(zāi)、備份數(shù)據(jù)自動化恢復(fù)與有效性驗證、測試數(shù)據(jù)多副本快速交付、數(shù)據(jù)安全***。 敏捷數(shù)據(jù)管理平臺ADM的核*專*技術(shù)——數(shù)據(jù)庫虛擬化技術(shù)。備份業(yè)務(wù)需求側(cè)功能節(jié)點統(tǒng)一管理,支持彈性擴展ADM采用多節(jié)點高可用部署架構(gòu),保...
傳統(tǒng)的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續(xù),經(jīng)過一段時間就必須執(zhí)行一次全量備份。因而傳統(tǒng)的備份方案經(jīng)常面臨備份窗口過大的問題,而且其增量備份數(shù)據(jù)的恢復(fù)效率相對低下,因為每個時間點的恢復(fù)都依賴于上一次全備副本和上一次全備副本后的所有增量數(shù)據(jù),恢復(fù)操作需要進行逐個迭代恢復(fù)。此外,過期增量數(shù)據(jù)的清理操作也受限于備份副本之間的依賴關(guān)系,不一定能及時被***。而長久增量備份與全量快照合成技術(shù),即***執(zhí)行全量備份,之后只對新增或改動過的數(shù)據(jù)進行增量備份,此增量備份數(shù)據(jù)是持續(xù)的,而且每個增量備份的數(shù)據(jù)副本將自動合成為全量快照副本,便于恢復(fù)。因此,長久增量備份與全量快照...
數(shù)據(jù)資源可視化管理,有效滿足上中下游數(shù)據(jù)的政策合規(guī)ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進行分組劃分的功能,將***過的數(shù)據(jù)進行分組管理,從下游測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源----中游數(shù)據(jù)中轉(zhuǎn)----下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時,ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進行預(yù)覽,通過可視化的結(jié)構(gòu)拓?fù)鋱D,*...
ADM產(chǎn)品數(shù)據(jù)安全***ADM平臺支持靜態(tài)數(shù)據(jù)脫敏(涉及數(shù)據(jù)庫、格式化文件、數(shù)據(jù)庫對象、消息隊列等),內(nèi)置104條***算法、47條敏感信息類型匹配庫,覆蓋個人身份信息、組織機構(gòu)信息、資質(zhì)資格證信息、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息、車輛數(shù)據(jù)信息等眾多類別的敏感數(shù)據(jù)類型識別與仿真***。具備廣義的通用型***規(guī)則,包括字符替換、隨機生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型***規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機構(gòu)代碼等***后數(shù)據(jù)的有效性、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)***和基于ETL的抽取***,提供文件***添加水印功能,提供國產(chǎn)化操作系...
管理控制中心(Master)是ADM的集中管理和調(diào)度控制中心,是進行可視化管理的Web操作平臺。它負(fù)責(zé)集中管理ADM中的所有模塊組件,系統(tǒng)管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協(xié)調(diào)并執(zhí)行各個角色對應(yīng)的操作;數(shù)據(jù)服務(wù)節(jié)點(CDMServer)是提供數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)恢復(fù)驗證、副本數(shù)據(jù)創(chuàng)建和交付、數(shù)據(jù)復(fù)制容災(zāi)功能的服務(wù)節(jié)點。用于記錄數(shù)據(jù)服務(wù)任務(wù)的配置信息、存儲情況、歷史記錄等,數(shù)據(jù)服務(wù)節(jié)點統(tǒng)一通過MasterIP訪問;***服務(wù)節(jié)點(SDMServer)是提供數(shù)據(jù)脫敏的服務(wù)節(jié)點,用于記錄接入平臺的敏感數(shù)據(jù)源、數(shù)據(jù)脫敏策略、***任務(wù)記錄等信息,***服務(wù)節(jié)點統(tǒng)一通過Mas...
l異地數(shù)據(jù)容災(zāi)(遠程復(fù)制)數(shù)字化時代,企業(yè)進行數(shù)據(jù)保護,不僅希望能夠?qū)崿F(xiàn)本地數(shù)據(jù)保護,也要有災(zāi)備中心進行異地數(shù)據(jù)保護。如此,即便本地數(shù)據(jù)中心遭遇地震、火災(zāi)等重大自然災(zāi)害或人為操作失誤等事故,導(dǎo)致本地備份數(shù)據(jù)或生產(chǎn)數(shù)據(jù)發(fā)生損壞或丟失時,能夠通過異地數(shù)據(jù)災(zāi)備,確保數(shù)據(jù)可恢復(fù)。ADM支持通過遠程復(fù)制技術(shù),將本地數(shù)據(jù)同步到異地災(zāi)備中心,實現(xiàn)異地數(shù)據(jù)容災(zāi)?;趥浞萑蝿?wù),將生產(chǎn)數(shù)據(jù)備份到本地的存儲池,基于遠程復(fù)制任務(wù),將本地存儲池中的備份數(shù)據(jù)同步到異地存儲池中,從而為生產(chǎn)數(shù)據(jù)提供雙重保護,當(dāng)本地生產(chǎn)數(shù)據(jù)、或備份數(shù)據(jù)丟失、損壞時,通過預(yù)先設(shè)置的容災(zāi)策略,在容災(zāi)端進行應(yīng)急接管。ADM的副本數(shù)據(jù)管理功能對數(shù)據(jù)版...
l數(shù)據(jù)壓縮存儲ADM支持同步數(shù)據(jù)壓縮,自動化地將同步數(shù)據(jù)按照3:1的比例壓縮,系統(tǒng)存儲空間顯示已壓縮的容量大小,存儲即壓縮。l自助式數(shù)據(jù)服務(wù)ADM不僅可以靈活地提供任意時間點的數(shù)據(jù),還可以對虛擬數(shù)據(jù)庫進行圖形化、自助式的管理。l虛擬數(shù)據(jù)庫集中管控虛擬數(shù)據(jù)庫集中管控是對虛擬數(shù)據(jù)庫在使用過程中的狀態(tài)進行管理,包括如下功能:①虛擬數(shù)據(jù)庫版本管理②虛擬數(shù)據(jù)庫共享管理③虛擬數(shù)據(jù)庫記錄查詢l敏感信息智能掃描ADM內(nèi)置敏感信息匹配庫,對數(shù)據(jù)庫的敏感信息進行智能定義掃描,成功發(fā)現(xiàn)后自動匹配成敏感類型,以匹配度和敏感信息類型進行靈活排序,避免漏掃。l關(guān)聯(lián)關(guān)系保持一致支持對數(shù)據(jù)庫中表間和表內(nèi)的約束信息和索引信息進...
l應(yīng)用數(shù)據(jù)一致性保障ADM主要應(yīng)用原生備份接口獲取具有應(yīng)用一致性保障的數(shù)據(jù),如針對Oracle,利用OracleRMAN和歸檔日志來保障備份數(shù)據(jù)庫數(shù)據(jù)的一致性;針對VMware虛擬化,利用VMwareSnapshot技術(shù)來保障備份虛擬機數(shù)據(jù)的一致性。l事務(wù)日志同步技術(shù)支持?jǐn)?shù)據(jù)庫的事務(wù)日志備份,事務(wù)日志是數(shù)據(jù)庫中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄,事務(wù)日志備份可將數(shù)據(jù)恢復(fù)到精確的故障點。例如:Oracle支持歸檔日志備份和刪除,MySQL數(shù)據(jù)庫支持redo日志備份和刪除等。l文件系統(tǒng)數(shù)據(jù)保護ADM支持備份非結(jié)構(gòu)化的文件系統(tǒng)。支持全量備份和長久增量備份與全量快照合成,備份策略采用定時...