敏捷數(shù)據(jù)管理平臺(ADM)由管理控制中心(Master)、數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDM Server)、敏感數(shù)據(jù)處理服務(wù)節(jié)點(diǎn)(SDM Server)、客戶端(Client)組成,服務(wù)節(jié)點(diǎn)可通過主備節(jié)點(diǎn)部署實(shí)現(xiàn)高可用,通過靈活的橫向節(jié)點(diǎn)擴(kuò)展實(shí)現(xiàn)功能擴(kuò)展和容量擴(kuò)充,每個(gè)服務(wù)節(jié)點(diǎn)可以安裝在物理服務(wù)器或虛擬服務(wù)器中。一個(gè)或多個(gè)客戶端連接到服務(wù)節(jié)點(diǎn),組成一個(gè)完整的數(shù)據(jù)管理平臺,客戶端負(fù)責(zé)收集數(shù)據(jù)、傳輸數(shù)據(jù),服務(wù)節(jié)點(diǎn)負(fù)責(zé)接收數(shù)據(jù)、存儲數(shù)據(jù)、敏感數(shù)據(jù)處理以及管理數(shù)據(jù)。備份數(shù)據(jù)是一家企業(yè)數(shù)據(jù)資產(chǎn)的來源,要注重安全防護(hù)。當(dāng)前抽取條數(shù)
當(dāng)前,有效的保障數(shù)據(jù)安全的方式仍然是數(shù)據(jù)備份,即企業(yè)針對生產(chǎn)業(yè)務(wù)的數(shù)據(jù)、文件制定備份策略生成備份數(shù)據(jù),一旦業(yè)務(wù)數(shù)據(jù)發(fā)生丟失或損壞,則恢復(fù)備份數(shù)據(jù)提供業(yè)務(wù)訪問,傳統(tǒng)的數(shù)據(jù)備份方案并未提供數(shù)據(jù)的恢復(fù)驗(yàn)證手段,因此企業(yè)在發(fā)生數(shù)據(jù)丟失時(shí),啟用備份數(shù)據(jù)恢復(fù)失敗的案例屢見不鮮,這也給各行業(yè)客戶造成了巨大的經(jīng)濟(jì)損失和不良的社會影響,為滿足法律的合規(guī)性要求,備份數(shù)據(jù)的恢復(fù)驗(yàn)證成為備份恢復(fù)解決方案的必要需求,但由于備份數(shù)據(jù)量巨大、涉及業(yè)務(wù)系統(tǒng)繁多、專業(yè)人員數(shù)量有限,定期的備份數(shù)據(jù)恢復(fù)驗(yàn)證仍然是一道難題,上訊敏捷數(shù)據(jù)備份恢復(fù)驗(yàn)證解決方案為備份數(shù)據(jù)的恢復(fù)驗(yàn)證提供了創(chuàng)新的技術(shù)手段,包括備份數(shù)據(jù)的分鐘級快速恢復(fù)、秒級可用性驗(yàn)證、按計(jì)劃周期性定時(shí)自動恢復(fù)驗(yàn)證,保障了備份數(shù)據(jù)的可恢復(fù)性與可用性。重復(fù)性的備份上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持全域重刪技術(shù),從而減少需要備份的數(shù)據(jù)量、縮短備份窗口。
數(shù)據(jù)分鐘級提供,提升數(shù)據(jù)交付效率縮短開發(fā)周期通過部署ADM幾分鐘內(nèi)即可創(chuàng)建一個(gè)數(shù)據(jù)量TB級別的虛擬數(shù)據(jù)庫,進(jìn)而,快速將測試數(shù)據(jù)傳輸?shù)较掠蔚拈_發(fā)測試環(huán)境,無需繁瑣冗長的審核和等待,這一過程有效減少了下游開發(fā)測試場景中測試數(shù)據(jù)的準(zhǔn)備時(shí)間,通常從以天計(jì)算縮短到以小時(shí)計(jì)算,時(shí)間效率提升明顯,**縮短了開發(fā)測試時(shí)間,進(jìn)而縮短產(chǎn)品的發(fā)布周期。(5)敏感數(shù)據(jù)定義識別與仿真***,保障數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)的安全性通過智能定義敏感數(shù)據(jù)類型,自動發(fā)現(xiàn)和識別敏感數(shù)據(jù),包括數(shù)據(jù)類型、內(nèi)容、約束關(guān)系,靈活排序減少人為篩選,***精細(xì)定位敏感數(shù)據(jù)源。豐富的***算法與仿真的字典庫相結(jié)合,保證***后數(shù)據(jù)仍具有業(yè)務(wù)屬性,數(shù)據(jù)表間關(guān)系仍具有業(yè)務(wù)一致性,不影響數(shù)據(jù)挖掘分析數(shù)據(jù)價(jià)值。對涉及企業(yè)、個(gè)人信息的隱私數(shù)據(jù),包括資金財(cái)產(chǎn)、個(gè)人、企業(yè)隱私的對照關(guān)系進(jìn)行敏感數(shù)據(jù)識別,通過內(nèi)置的***規(guī)則進(jìn)行***處理,將數(shù)據(jù)敏感部分去隱私化,但并不失去數(shù)據(jù)挖掘的價(jià)值特征,減少數(shù)據(jù)隱私泄露帶來的風(fēng)險(xiǎn)和損失,甚至降低可能發(fā)生的人身傷害和違法犯罪事件。
在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當(dāng)前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進(jìn)行哈希算法的***標(biāo)記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因修改數(shù)據(jù)位移而導(dǎo)致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問題,比較大限度地提升重刪性能和重刪率,為避免數(shù)據(jù)備份過程中冗余網(wǎng)絡(luò)傳輸與存儲開銷,在源端設(shè)置粗粒度前置數(shù)據(jù)校驗(yàn)可以明顯縮小備份傳輸過程中的數(shù)據(jù)冗余,目的在于不備份任意一個(gè)冗余數(shù)據(jù)。數(shù)據(jù)安全領(lǐng)域的CDM是指copy data management。
近年來,證券業(yè)務(wù)快速發(fā)展,信息系統(tǒng)變更日益頻繁,敏捷開發(fā)、快速迭代已經(jīng)成為支持業(yè)務(wù)創(chuàng)新的必要條件。數(shù)據(jù)庫作為信息系統(tǒng)運(yùn)行的重要支撐,數(shù)據(jù)準(zhǔn)備和交付的自動化程度對系統(tǒng)開發(fā)、測試效率有大的影響。Gartner對CDM的定義是,它從生產(chǎn)環(huán)境通過快照技術(shù)獲取有應(yīng)用一致性保證的數(shù)據(jù),在非生產(chǎn)存儲上生成“黃金副本”(GoldenImage),這個(gè)“黃金副本”數(shù)據(jù)格式是原始的磁盤格式,可再虛擬化成多個(gè)副本直接掛載給服務(wù)器,分別用于備份恢復(fù)、容災(zāi)或開發(fā)測試等.副本數(shù)據(jù)管理CDM產(chǎn)品能解決軟件開發(fā)測試部門的供數(shù)需求。持續(xù)數(shù)據(jù)保護(hù)
網(wǎng)絡(luò)安全領(lǐng)域的CDM是指什么?當(dāng)前抽取條數(shù)
l數(shù)據(jù)壓縮存儲ADM支持同步數(shù)據(jù)壓縮,自動化地將同步數(shù)據(jù)按照3:1的比例壓縮,系統(tǒng)存儲空間顯示已壓縮的容量大小,存儲即壓縮。l自助式數(shù)據(jù)服務(wù)ADM不僅可以靈活地提供任意時(shí)間點(diǎn)的數(shù)據(jù),還可以對虛擬數(shù)據(jù)庫進(jìn)行圖形化、自助式的管理。l虛擬數(shù)據(jù)庫集中管控虛擬數(shù)據(jù)庫集中管控是對虛擬數(shù)據(jù)庫在使用過程中的狀態(tài)進(jìn)行管理,包括如下功能:①虛擬數(shù)據(jù)庫版本管理②虛擬數(shù)據(jù)庫共享管理③虛擬數(shù)據(jù)庫記錄查詢l敏感信息智能掃描ADM內(nèi)置敏感信息匹配庫,對數(shù)據(jù)庫的敏感信息進(jìn)行智能定義掃描,成功發(fā)現(xiàn)后自動匹配成敏感類型,以匹配度和敏感信息類型進(jìn)行靈活排序,避免漏掃。l關(guān)聯(lián)關(guān)系保持一致支持對數(shù)據(jù)庫中表間和表內(nèi)的約束信息和索引信息進(jìn)行***,支持視圖、序列、觸發(fā)器、存儲過程等數(shù)據(jù)對象的抽取,保持***前后數(shù)據(jù)關(guān)系的一致。當(dāng)前抽取條數(shù)