敏捷數(shù)據(jù)管理平臺(tái)(ADM)由管理控制中心(Master)、數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)、***服務(wù)節(jié)點(diǎn)(SDMServer)、客戶端(Client)組成,服務(wù)節(jié)點(diǎn)可通過(guò)主備節(jié)點(diǎn)部署實(shí)現(xiàn)高可用,通過(guò)靈活的橫向節(jié)點(diǎn)擴(kuò)展實(shí)現(xiàn)功能擴(kuò)展和容量擴(kuò)充,每個(gè)服務(wù)節(jié)點(diǎn)可以安裝在物理服務(wù)器或虛擬服務(wù)器中。一個(gè)或多個(gè)客戶端連接到服務(wù)節(jié)點(diǎn),組成一個(gè)完整的數(shù)據(jù)管理平臺(tái),客戶端負(fù)責(zé)收集數(shù)據(jù)、傳輸數(shù)據(jù),服務(wù)節(jié)點(diǎn)負(fù)責(zé)接收數(shù)據(jù)、存儲(chǔ)數(shù)據(jù)、數(shù)據(jù)脫敏以及管理數(shù)據(jù)。敏捷數(shù)據(jù)管理平臺(tái)(ADM)由4個(gè)模塊組成:數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)包括數(shù)據(jù)備份模塊(PDM)、數(shù)據(jù)校驗(yàn)?zāi)K(BDM)、數(shù)據(jù)交付模塊(TDM)3個(gè)模塊;***服務(wù)節(jié)點(diǎn)(SDMServer)包括數(shù)據(jù)脫敏模塊(SDM)1個(gè)模塊。網(wǎng)絡(luò)安全領(lǐng)域的CDM是指什么?敏感源端
上訊敏捷數(shù)據(jù)管理平臺(tái)(ADM)支持重復(fù)數(shù)據(jù)刪除技術(shù),在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場(chǎng)景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會(huì)根據(jù)輸入側(cè)不同粒度(卷級(jí)、文件級(jí)、塊級(jí))的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級(jí)與全局指紋庫(kù)提供自適應(yīng)源端的全局重刪算法與策略,當(dāng)前支持源端塊級(jí)、文件級(jí)重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長(zhǎng)數(shù)據(jù)切分算法,通過(guò)對(duì)數(shù)據(jù)塊進(jìn)行哈希算法的標(biāo)記,即指紋(Fingerprint),在指紋庫(kù)中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識(shí)別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因修改數(shù)據(jù)位移而導(dǎo)致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問(wèn)題,較大限度地提升重刪性能和重刪率,為避免數(shù)據(jù)備份過(guò)程中冗余網(wǎng)絡(luò)傳輸與存儲(chǔ)開(kāi)銷,在源端設(shè)置粗粒度前置數(shù)據(jù)校驗(yàn)可以明顯縮小備份傳輸過(guò)程中的數(shù)據(jù)冗余,目的在于不備份任意一個(gè)冗余數(shù)據(jù)。敏感信息自動(dòng)發(fā)現(xiàn)上訊ADM產(chǎn)品是集數(shù)據(jù)備份管理、備份校驗(yàn)管理、數(shù)據(jù)副本管理、數(shù)據(jù)脫敏管理四位一體的數(shù)據(jù)管理產(chǎn)品。
企業(yè)開(kāi)發(fā)需求更新頻繁,對(duì)測(cè)試環(huán)境和測(cè)試數(shù)據(jù)提出了同步變更的要求,ADM的虛擬數(shù)據(jù)庫(kù)快照功能解決了測(cè)試數(shù)據(jù)版本迭代的問(wèn)題,通過(guò)對(duì)數(shù)據(jù)庫(kù)狀態(tài)進(jìn)行定時(shí)或即時(shí)的記錄,保留當(dāng)前虛擬數(shù)據(jù)庫(kù)的狀態(tài)作為測(cè)試數(shù)據(jù)版本,一旦需要調(diào)用某個(gè)版本時(shí),只需切換到不同時(shí)間點(diǎn)的虛擬庫(kù)快照即可,靈活實(shí)現(xiàn)測(cè)試數(shù)據(jù)版本的任意切換,ADM還支持創(chuàng)建和維護(hù)虛擬庫(kù)級(jí)聯(lián)快照,滿足回歸測(cè)試等具體應(yīng)用場(chǎng)景,通過(guò)這一功能明顯提升了開(kāi)發(fā)測(cè)試效率、升級(jí)迭代效率。
功能節(jié)點(diǎn)統(tǒng)一管理,支持彈性擴(kuò)展ADM采用多節(jié)點(diǎn)高可用部署架構(gòu),保障數(shù)據(jù)服務(wù)高可用,并消除單節(jié)點(diǎn)故障導(dǎo)致的業(yè)務(wù)不可用問(wèn)題,確保數(shù)據(jù)服務(wù)連續(xù)性。采用Scale-out架構(gòu),根據(jù)業(yè)務(wù)發(fā)展規(guī)模,按需擴(kuò)展集群節(jié)點(diǎn),無(wú)需停止服務(wù),靈活滿足業(yè)務(wù)需求。同時(shí),ADM支持存儲(chǔ)池容量的彈性擴(kuò)充,滿足不斷增長(zhǎng)的數(shù)據(jù)存儲(chǔ)需求。(2)數(shù)據(jù)存儲(chǔ)成本倍數(shù)級(jí)節(jié)約,提升數(shù)據(jù)存儲(chǔ)環(huán)節(jié)的效能首先,數(shù)據(jù)備份面臨存儲(chǔ)成本高的問(wèn)題,ADM采用內(nèi)置高效的壓縮存儲(chǔ)池存放數(shù)據(jù),壓縮比約為3:1,存儲(chǔ)即壓縮,***降低了備份數(shù)據(jù)的存儲(chǔ)成本;其次,通過(guò)ADM的數(shù)據(jù)庫(kù)虛擬化技術(shù),一份基礎(chǔ)數(shù)據(jù)即可快速拉起多份虛擬數(shù)據(jù)庫(kù),由于虛擬數(shù)據(jù)庫(kù)90%的數(shù)據(jù)均與原始數(shù)據(jù)相同,因此拉起時(shí)幾乎不占用額外的物理存儲(chǔ)空間,*對(duì)新增的寫(xiě)操作計(jì)入容量占用,因此,隨著數(shù)據(jù)分發(fā)使用的場(chǎng)景和頻率增加,虛擬庫(kù)的數(shù)量越來(lái)越多,而存儲(chǔ)成本將會(huì)呈倍數(shù)級(jí)節(jié)約,例如針對(duì)同一份數(shù)據(jù)創(chuàng)建N個(gè)虛擬庫(kù),傳統(tǒng)方法需要N倍的存儲(chǔ)空間占用,而通過(guò)ADM只需要占用近乎0TB的存儲(chǔ)空間,**節(jié)約了數(shù)據(jù)存儲(chǔ)環(huán)節(jié)的資源和成本。數(shù)據(jù)管理領(lǐng)域的CDM產(chǎn)品哪個(gè)廠商做得好?
用戶提出數(shù)據(jù)管理產(chǎn)品的上線既要滿足云技術(shù)的部署帶來(lái)數(shù)據(jù)遷移和歷史備份數(shù)據(jù)接管的要求,又要對(duì)用戶系統(tǒng)更新迭代導(dǎo)致副本數(shù)據(jù)使用管理需求增加、測(cè)試場(chǎng)景需求增加的問(wèn)題予以解決,因此用戶對(duì)CDM的部署方式提出了要求:即適應(yīng)混合多云環(huán)境,支持BaaS和訂閱的模式部署。敏捷數(shù)據(jù)管理平臺(tái)(ADM)產(chǎn)品具備靈活的部署模式,既支持單機(jī)部署,也支持高可用部署、多云混合部署,且每個(gè)功能均支持在線擴(kuò)展,具備擴(kuò)展的便捷性。在混合多云環(huán)境中,只需要將ADM在每朵云中進(jìn)行部署,即可實(shí)現(xiàn)備份數(shù)據(jù)、副本數(shù)據(jù)的多云間統(tǒng)一管理,并支持在每朵云中創(chuàng)建虛擬數(shù)據(jù),實(shí)現(xiàn)數(shù)據(jù)的分鐘級(jí)快速交付;在云環(huán)境中的測(cè)試環(huán)境,可以利用云主機(jī)的快照功能及ADM的虛擬數(shù)據(jù)功能,達(dá)到整個(gè)測(cè)試環(huán)境的版本管理(包括系統(tǒng)、數(shù)據(jù)),達(dá)到數(shù)據(jù)使用及管理的便利性.副本數(shù)據(jù)管理CDM產(chǎn)品能解決軟件開(kāi)發(fā)測(cè)試部門的供數(shù)需求。敏感源端
上訊ADM能提供面向企業(yè)數(shù)據(jù)使用的成本控制、版本管理與合理合法開(kāi)發(fā)利用。敏感源端
數(shù)據(jù)副本管理是ADM功能模塊之一,可單獨(dú)作為企業(yè)級(jí)副本數(shù)據(jù)管理(CDM)產(chǎn)品。為應(yīng)對(duì)當(dāng)前復(fù)雜的IT環(huán)境,ADM提出集云、物理、虛擬為一體的,面向結(jié)構(gòu)化數(shù)據(jù)庫(kù)、非結(jié)構(gòu)化數(shù)據(jù)、虛擬化和云平臺(tái)的***數(shù)據(jù)副本分發(fā)與交付管理解決方案。主要通過(guò)數(shù)據(jù)副本管理的核心專利技術(shù)——數(shù)據(jù)庫(kù)虛擬化技術(shù)對(duì)源數(shù)據(jù)進(jìn)行CDM原格式獲取生成黃金副本、存儲(chǔ)黃金副本作為基準(zhǔn)數(shù)據(jù)、虛擬化為多個(gè)副本掛載恢復(fù),**終達(dá)到快速交付副本數(shù)據(jù)、靈活管理副本數(shù)據(jù)版本、集中管理副本數(shù)據(jù)存儲(chǔ)與流轉(zhuǎn)的目標(biāo),是主要面向企業(yè)數(shù)據(jù)運(yùn)維、軟件開(kāi)發(fā)測(cè)試部門解決自動(dòng)化閉環(huán)取數(shù)供數(shù)、測(cè)試數(shù)據(jù)快速交付等典型應(yīng)用場(chǎng)景的問(wèn)題。敏感源端