文件敏感數(shù)據(jù)處理

來源: 發(fā)布時(shí)間:2023-11-08

CDM方案還設(shè)置了數(shù)據(jù)共享交換區(qū)域,數(shù)據(jù)提供方與接收方的數(shù)據(jù)樹狀拓?fù)浣Y(jié)構(gòu),可以詳細(xì)展示共享數(shù)據(jù)的來源、所屬存儲(chǔ)池、接收目標(biāo)的關(guān)聯(lián)關(guān)系,通過可視化拓?fù)鋱D全局預(yù)覽數(shù)據(jù)交換階段數(shù)據(jù)發(fā)布的詳細(xì)情況,便于排查數(shù)據(jù)共享內(nèi)容合規(guī)性與共享路徑的安全性。針對(duì)向組織外部提供數(shù)據(jù)或數(shù)據(jù)交換的需求,則需要在數(shù)據(jù)發(fā)布之前進(jìn)行敏感數(shù)據(jù)的變形處理,通過應(yīng)用專業(yè)的敏感數(shù)據(jù)處理產(chǎn)品,保障數(shù)據(jù)發(fā)布后的隱私安全,防止核心數(shù)據(jù)泄露,同時(shí)需要保證變形后數(shù)據(jù)的邏輯關(guān)系保持、仿真度高、可用性。上訊ADM榮獲網(wǎng)信自主創(chuàng)新“尖鋒榜”產(chǎn)品獎(jiǎng)。文件敏感數(shù)據(jù)處理

文件敏感數(shù)據(jù)處理,上訊敏捷數(shù)據(jù)管理平臺(tái)ADM

通過部署敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品的數(shù)據(jù)副本管理模塊,實(shí)現(xiàn)了測(cè)試數(shù)據(jù)版本迭代管理,提升了數(shù)據(jù)使用過程中的應(yīng)用效率。隨著移動(dòng)互聯(lián)網(wǎng)技術(shù)的不斷革新,移動(dòng)應(yīng)用業(yè)務(wù)不斷擴(kuò)張,企業(yè)面臨著前臺(tái)業(yè)務(wù)頻繁更新升級(jí)的現(xiàn)狀,為保證既有業(yè)務(wù)穩(wěn)定,需要對(duì)新提出的升級(jí)需求開展仿真測(cè)試與回歸測(cè)試,因此亟需一套能夠?qū)y(cè)試環(huán)境的測(cè)試數(shù)據(jù)進(jìn)行版本靈活切換的解決方案,便于測(cè)試數(shù)據(jù)版本的即時(shí)調(diào)用,迅速適應(yīng)不同業(yè)務(wù)程序提供不同版本的測(cè)試數(shù)據(jù)。ADM的虛擬數(shù)據(jù)庫快照功能解決了這一問題,通過對(duì)數(shù)據(jù)庫狀態(tài)進(jìn)行定時(shí)或即時(shí)的記錄,管理和維護(hù)當(dāng)前虛擬數(shù)據(jù)庫的數(shù)據(jù),使用人員可以隨時(shí)通過記錄的虛擬數(shù)據(jù)庫快照提供一個(gè)版本的測(cè)試數(shù)據(jù),經(jīng)過測(cè)試后保存當(dāng)前的數(shù)據(jù)庫使用狀態(tài),便于開發(fā)測(cè)試的數(shù)據(jù)版本迭代,通過這一功能明顯提升了程序升級(jí)測(cè)試、版本迭代的效率。數(shù)字技術(shù)上訊ADM產(chǎn)品虛擬數(shù)據(jù)秒級(jí)分發(fā),提升了環(huán)境準(zhǔn)備效率,數(shù)據(jù)交付時(shí)間整體節(jié)約100倍以上。

文件敏感數(shù)據(jù)處理,上訊敏捷數(shù)據(jù)管理平臺(tái)ADM

ADM采用基于CDM技術(shù)的數(shù)據(jù)備份方式,不同于傳統(tǒng)備份方式,CDM技術(shù)是以原格式備份為基礎(chǔ),生成具有應(yīng)用一致性的“黃金副本”,再虛擬化成多個(gè)副本直接掛載恢復(fù)到目標(biāo)服務(wù)器。原格式備份(又稱Image copy)是指直接備份原始的數(shù)據(jù)文件格式,不生成備份集,好處是恢復(fù)時(shí)無需restore recovery直接打開即可使用。通過CDM技術(shù)恢復(fù)的數(shù)據(jù),都來源于這份原格式備份的“黃金副本”,只需虛擬化為多個(gè)副本遠(yuǎn)程掛載即可恢復(fù)數(shù)據(jù),TB量級(jí)的數(shù)據(jù)恢復(fù)時(shí)間為分鐘級(jí),縮短了數(shù)據(jù)恢復(fù)的時(shí)間;同時(shí),每一份虛擬副本只消耗極小的存儲(chǔ)資源(相較于原始容量幾乎為 0),且虛擬副本的數(shù)據(jù)都是可讀可寫的,而這些變量數(shù)據(jù)會(huì)消耗一定的存儲(chǔ)資源(經(jīng)過實(shí)踐分析,變量數(shù)據(jù)一般不會(huì)超過數(shù)據(jù)總量的10%),從而減少存儲(chǔ)資源開銷和管理成本。

以存儲(chǔ)為基礎(chǔ)提供的CDM,雖然能夠提供快照和克隆功能,但很難實(shí)現(xiàn)跨異構(gòu)存儲(chǔ),構(gòu)建企業(yè)級(jí)規(guī)則驅(qū)動(dòng)的副本數(shù)據(jù)平臺(tái),并缺乏豐富的數(shù)據(jù)交換階段的共享與發(fā)布服務(wù)能力,無法提供自動(dòng)化、自服務(wù)等功能。塊級(jí)CDP技術(shù)提供的CDM功能,利用CDP技術(shù)所創(chuàng)建的副本數(shù)據(jù),是一種磁盤快照技術(shù),無法保證數(shù)據(jù)的一致性,并且同一時(shí)間的磁盤快照只能掛載一份,難以滿足多應(yīng)用場(chǎng)景的數(shù)據(jù)共享與發(fā)布需求。端到端的CDM把單純面向恢復(fù)的應(yīng)用場(chǎng)景,變成了面向數(shù)據(jù)使用包括但不限于數(shù)據(jù)共享、數(shù)據(jù)發(fā)布、數(shù)據(jù)分發(fā)的應(yīng)用場(chǎng)景,通過副本數(shù)據(jù)在各個(gè)業(yè)務(wù)環(huán)節(jié)的即時(shí)可用,為更多的數(shù)據(jù)共享業(yè)務(wù)場(chǎng)景提供數(shù)據(jù)支撐。上訊ADM產(chǎn)品數(shù)據(jù)庫虛擬化技術(shù)是什么意思?

文件敏感數(shù)據(jù)處理,上訊敏捷數(shù)據(jù)管理平臺(tái)ADM

在開發(fā)測(cè)試環(huán)境中的工作效率,包括像備份應(yīng)急恢復(fù)和分鐘級(jí)的數(shù)據(jù)交付,數(shù)據(jù)環(huán)境準(zhǔn)備時(shí)間至少縮短了5-6倍,獲得的客戶收益包括:首先,基于ADM分鐘級(jí)的數(shù)據(jù)回滾,回歸測(cè)試等工作效率得到提高。以回歸測(cè)試為例,過去,每次都需要先手工從備份系統(tǒng)恢復(fù)數(shù)據(jù),恢復(fù)的時(shí)間較長,一次回歸測(cè)試的數(shù)據(jù)準(zhǔn)備需要耗費(fèi)的時(shí)間可能是一整天甚至幾天時(shí)間。而利用ADM快速的數(shù)據(jù)回滾,同樣環(huán)境下,一天時(shí)間可以完成5,6次回歸測(cè)試。第二,備份恢復(fù)實(shí)現(xiàn)分鐘級(jí)。此前,如果測(cè)試環(huán)境需要備份,需要所有的系統(tǒng)逐個(gè)去做備份,非常麻煩;另外,測(cè)試數(shù)據(jù)庫的數(shù)據(jù)損壞以后,數(shù)據(jù)恢復(fù)也需要很長時(shí)間。基于CDM的備份恢復(fù)更加容易,通過預(yù)先在一些時(shí)間點(diǎn)打快照,恢復(fù)是分鐘級(jí)的。第三,實(shí)現(xiàn)了測(cè)試環(huán)境的快速搭建。在數(shù)據(jù)庫運(yùn)行環(huán)境就緒的前提下,利用ADM可以分鐘級(jí)的交付數(shù)據(jù),在時(shí)間上至少縮短到原來的十分之一。上訊ADM包括生產(chǎn)數(shù)據(jù)備份、備份恢復(fù)校驗(yàn)、敏感數(shù)據(jù)處理、數(shù)據(jù)副本管理四大功能模塊。變量數(shù)據(jù)

喚醒大量淪為暗數(shù)據(jù)的備份數(shù)據(jù),讓數(shù)據(jù)備份即可用。文件敏感數(shù)據(jù)處理

備份校驗(yàn)管理是ADM功能模塊之一,主要用于對(duì)備份數(shù)據(jù)進(jìn)行自動(dòng)化的恢復(fù)校驗(yàn),保證備份數(shù)據(jù)的可恢復(fù)性、完整性。通過對(duì)接備份系統(tǒng)(如NetBackup、Commvault、NetWorker等)集中管理存儲(chǔ)資源、恢復(fù)服務(wù)器資源和恢復(fù)任務(wù),實(shí)現(xiàn)存儲(chǔ)空間、恢復(fù)服務(wù)器和恢復(fù)任務(wù)的自動(dòng)調(diào)度,從而完成備份數(shù)據(jù)有效性驗(yàn)證的全自動(dòng)化。備份校驗(yàn)管理可以滿足用戶對(duì)當(dāng)前備份數(shù)據(jù)的可恢復(fù)性驗(yàn)證、恢復(fù)后的完整性驗(yàn)證兩方面的需求,能夠覆蓋用戶現(xiàn)有全部業(yè)務(wù)系統(tǒng)的備份數(shù)據(jù),包括備份集和備份文件,實(shí)現(xiàn)跨操作系統(tǒng)平臺(tái)的數(shù)據(jù)恢復(fù)(如AIX到Linux),達(dá)到驗(yàn)證工作的高覆蓋率,提高有效性驗(yàn)證的頻率。文件敏感數(shù)據(jù)處理