上訊敏捷數(shù)據(jù)管理平臺(ADM)的主要技術(shù)是(1)ADM內(nèi)置獨有的高效壓縮存儲池,壓縮比高達(dá)3:1,存儲即壓縮,降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲成本與持續(xù)增長的副本數(shù)據(jù)存儲成本。(2)ADM的數(shù)據(jù)庫虛擬化技術(shù),是通過獲取一份基礎(chǔ)數(shù)據(jù)源,快速拉起多份虛擬數(shù)據(jù)庫掛載給目標(biāo)業(yè)務(wù)使用,虛擬數(shù)據(jù)庫拉起時幾乎不占用物理存儲空間,在實驗室測試環(huán)境下拉起一個10TB數(shù)據(jù)量的虛擬數(shù)據(jù)庫,只占用1GB左右的存儲空間,明顯節(jié)約了存儲成本和時間周期,因此針對開發(fā)測試場景,需要對同一份數(shù)據(jù)創(chuàng)建N份副本數(shù)據(jù)時,存儲成本節(jié)約近乎N倍。上訊ADM能提供面向企業(yè)數(shù)據(jù)使用的成本控制、版本管理與合理合法開發(fā)利用。全庫掃描
ADM貫穿數(shù)據(jù)收集、數(shù)據(jù)存儲、數(shù)據(jù)加工、數(shù)據(jù)傳輸、數(shù)據(jù)使用、數(shù)據(jù)提供、數(shù)據(jù)回收的各個環(huán)節(jié),集中管理存儲資源、服務(wù)器資源,實現(xiàn)閉環(huán)式自動化管理流程,統(tǒng)一授權(quán)和全程監(jiān)控,節(jié)省大量人力資源開銷,減少了數(shù)據(jù)恢復(fù)的重復(fù)性工作,自動化流程任務(wù)編排降低了人為因素導(dǎo)致的數(shù)據(jù)泄露風(fēng)險?;跀?shù)據(jù)庫虛擬化技術(shù),ADM實現(xiàn)了對數(shù)據(jù)庫、文件、虛擬機(jī)等副本的分鐘級創(chuàng)建,通過存儲級快照快速保留數(shù)據(jù)副本的狀態(tài),實現(xiàn)數(shù)據(jù)版本的保留,跟蹤數(shù)據(jù)流向。同時,數(shù)據(jù)副本支持時效性設(shè)置,當(dāng)數(shù)據(jù)副本超出使用期限,ADM平臺會自動停止使用或回收資源,實現(xiàn)對數(shù)據(jù)資產(chǎn)的全生命周期統(tǒng)一管理。Hadoop存儲管理上訊ADM通過數(shù)據(jù)備份后獲取到的黃金副本開啟數(shù)據(jù)開發(fā)利用的創(chuàng)新流程,充分發(fā)揮數(shù)字資產(chǎn)價值。
通過智能定義敏感數(shù)據(jù)類型,自動發(fā)現(xiàn)和識別敏感數(shù)據(jù),包括數(shù)據(jù)類型、內(nèi)容、約束關(guān)系,靈活排序減少人為篩選,定位敏感數(shù)據(jù)源。豐富的算法與仿真的字典庫相結(jié)合,保證處理后數(shù)據(jù)仍具有業(yè)務(wù)屬性,數(shù)據(jù)表間關(guān)系仍具有業(yè)務(wù)一致性,不影響數(shù)據(jù)挖掘分析數(shù)據(jù)價值。對涉及企業(yè)、個人信息的隱私數(shù)據(jù),包括資金財產(chǎn)、個人、企業(yè)隱私的對照關(guān)系進(jìn)行敏感數(shù)據(jù)識別,通過內(nèi)置的規(guī)則進(jìn)行處理,將數(shù)據(jù)敏感部分去隱私化,但并不失去數(shù)據(jù)挖掘的價值特征,減少數(shù)據(jù)隱私泄露帶來的風(fēng)險和損失,甚至降低可能發(fā)生的人身傷害和違法犯罪事件。
l數(shù)據(jù)庫數(shù)據(jù)保護(hù)ADM采用圖形化向?qū)讲僮?,無需用戶手動執(zhí)行備份和恢復(fù)腳本,簡化了備份恢復(fù)的難度。既支持傳統(tǒng)的無掛載備份,也支持***全量備份、后續(xù)長久增量備份與全量快照合成、事務(wù)日志同步相結(jié)合的方式。數(shù)據(jù)庫備份的基本流程如下:通過管理控制中心(Master)的Web管理頁面推送客戶端(Client)軟件到需要保護(hù)的生產(chǎn)服務(wù)器上,自動完成客戶端軟件的安裝和注冊,與Server服務(wù)器端保持通訊??蛻舳藢⒆R別生產(chǎn)服務(wù)器中的數(shù)據(jù)庫數(shù)據(jù),并通過備份API讀取數(shù)據(jù)庫數(shù)據(jù),然后將其傳輸至數(shù)據(jù)服務(wù)節(jié)點完成備份。管理控制中心(Master)負(fù)責(zé)向客戶端軟件和服務(wù)節(jié)點發(fā)送控制信息,管理整個備份任務(wù)的運行。例如:Oracle數(shù)據(jù)庫采用RMAN接口進(jìn)行多通道并行備份,備份粒度支持整個實例備份,恢復(fù)粒度支持細(xì)化到選定表恢復(fù)。哪個產(chǎn)品支持向?qū)降拿舾袛?shù)據(jù)處理流程?
備份是一個長期的過程,恢復(fù)往往只在事故發(fā)生后進(jìn)行,且備份數(shù)據(jù)的可恢復(fù)性、可用性在很大程度上依賴于備份數(shù)據(jù)的完整性。為了保證備份數(shù)據(jù)的可用性,很多企事業(yè)單位會定期進(jìn)行數(shù)據(jù)庫備份的恢復(fù)演練,也就是從備份數(shù)據(jù)中恢復(fù)出一套完整的數(shù)據(jù)庫。執(zhí)行備份數(shù)據(jù)的恢復(fù)操作,需要備份系統(tǒng)管理人員或者數(shù)據(jù)庫管理人員(DBA)對數(shù)據(jù)的備份恢復(fù)實現(xiàn)原理有深入的了解,并周期性地對備份數(shù)據(jù)進(jìn)行恢復(fù)操作,以保證備份數(shù)據(jù)的可恢復(fù)性與可用性。這種長期機(jī)械性、重復(fù)性的備份、恢復(fù)及驗證工作,無疑會占用DBA大量的時間和精力。在DBA界還流傳著這么一句話:“故障一定會發(fā)生,只是早晚的問題!”。作為一名DBA,只有時刻記得進(jìn)行備份和恢復(fù)校驗,才能避免某一天事故發(fā)生時出現(xiàn)難以挽回的悲劇.
上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品數(shù)據(jù)庫虛擬化技術(shù)是什么意思?誤匹配
上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持全域重刪技術(shù),重刪指紋庫重建功能。全庫掃描
敏捷數(shù)據(jù)存儲對數(shù)據(jù)處理環(huán)節(jié)中的數(shù)據(jù)存儲部分進(jìn)行了創(chuàng)新,采用獨特的壓縮存儲池存放備份數(shù)據(jù),將單獨的卷管理器和文件系統(tǒng)角色結(jié)合在一起,由文件系統(tǒng)掌握磁盤的基礎(chǔ)結(jié)構(gòu),傳統(tǒng)文件系統(tǒng)一次只能在單個磁盤上創(chuàng)建,如果有兩個磁盤,則必須創(chuàng)建兩個單獨的文件系統(tǒng),而卷管理器和文件系統(tǒng)的組合解決了這個問題,它允許創(chuàng)建許多共享可用存儲池的文件系統(tǒng)。該存儲池的優(yōu)勢之一是對磁盤物理布局的控制,當(dāng)將其他磁盤添加到池中時,現(xiàn)有文件系統(tǒng)可以自動增長,而新空間可用于所有文件系統(tǒng),即可以通過添加硬盤來增大池的存儲容量,進(jìn)行分區(qū)和格式化.全庫掃描