通過部署敏捷數據管理平臺ADM產品的數據副本管理模塊,實現了測試數據版本迭代管理,提升了數據使用過程中的應用效率。隨著移動互聯網技術的不斷革新,移動應用業務不斷擴張,企業面臨著前臺業務頻繁更新升級的現狀,為保證既有業務穩定,需要對新提出的升級需求開展仿真測試與回歸測試,因此亟需一套能夠對測試環境的測試數據進行版本靈活切換的解決方案,便于測試數據版本的即時調用,迅速適應不同業務程序提供不同版本的測試數據。ADM的虛擬數據庫快照功能解決了這一問題,通過對數據庫狀態進行定時或即時的記錄,管理和維護當前虛擬數據庫的數據,使用人員可以隨時通過記錄的虛擬數據庫快照提供一個版本的測試數據,經過測試后保存當前...
近年來,證券業務快速發展,信息系統變更日益頻繁,敏捷開發、快速迭代已經成為支持業務創新的必要條件。數據庫作為信息系統運行的重要支撐,數據準備和交付的自動化程度對系統開發、測試效率有大的影響。Gartner對CDM的定義是,它從生產環境通過快照技術獲取有應用一致性保證的數據,在非生產存儲上生成“黃金副本”(GoldenImage),這個“黃金副本”數據格式是原始的磁盤格式,可再虛擬化成多個副本直接掛載給服務器,分別用于備份恢復、容災或開發測試等.敏捷數據管理平臺ADM產品數據信創產品,實現了國產數據庫的備份與國產操作系統的兼容。敏感數據和變形規則綁定通過敏捷數據管理平臺ADM產品的部署實施,采用...
ADM產品數據安全***ADM平臺支持靜態數據脫敏(涉及數據庫、格式化文件、數據庫對象、消息隊列等),內置104條***算法、47條敏感信息類型匹配庫,覆蓋個人身份信息、組織機構信息、資質資格證信息、金融數據信息、醫療數據信息、車輛數據信息等眾多類別的敏感數據類型識別與仿真***。具備廣義的通用型***規則,包括字符替換、隨機生成、截短、加權生成、加密等;支持保留原有數據含義的仿真型***規則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機構代碼等***后數據的有效性、可用性。提供基于數據庫的庫內***和基于ETL的抽取***,提供文件***添加水印功能,提供國產化操作系...
通過敏捷數據管理平臺ADM產品的部署實施,采用數據庫虛擬化技術,快速將數據交付到開發、測試網,有效減少開發、測試場景中測試數據的準備時間,提高了開發、測試環境搭建的效率。ADM內置獨有的高效壓縮存儲池,平均壓縮比3:1,存儲即壓縮,降低了基礎數據源獲取的存儲成本,只需一份基礎數據源,即可快速拉起多份虛擬數據庫,節約了存儲成本10倍以上。ADM通過虛擬數據庫快照功能,可以靈活地對虛擬數據庫的狀態進行管理和維護。使用人員可以隨時保存當前的數據庫使用狀態,用于開發、測試的數據版本迭代。上訊敏捷數據管理平臺ADM產品能對接NBU直接恢復。高可用上訊敏捷數據管理平臺(ADM)的主要技術是(1)ADM內置...
數據分鐘級提供,提升數據交付效率縮短開發周期通過部署ADM幾分鐘內即可創建一個數據量TB級別的虛擬數據庫,進而,快速將測試數據傳輸到下游的開發測試環境,無需繁瑣冗長的審核和等待,這一過程有效減少了下游開發測試場景中測試數據的準備時間,通常從以天計算縮短到以小時計算,時間效率提升明顯,**縮短了開發測試時間,進而縮短產品的發布周期。(5)敏感數據定義識別與仿真***,保障數據流轉環節的安全性通過智能定義敏感數據類型,自動發現和識別敏感數據,包括數據類型、內容、約束關系,靈活排序減少人為篩選,***精細定位敏感數據源。豐富的***算法與仿真的字典庫相結合,保證***后數據仍具有業務屬性,數據表間關...
數據分鐘級提供,提升數據交付效率縮短開發周期通過部署ADM幾分鐘內即可創建一個數據量TB級別的虛擬數據庫,進而,快速將測試數據傳輸到下游的開發測試環境,無需繁瑣冗長的審核和等待,這一過程有效減少了下游開發測試場景中測試數據的準備時間,通常從以天計算縮短到以小時計算,時間效率提升明顯,**縮短了開發測試時間,進而縮短產品的發布周期。(5)敏感數據定義識別與仿真***,保障數據流轉環節的安全性通過智能定義敏感數據類型,自動發現和識別敏感數據,包括數據類型、內容、約束關系,靈活排序減少人為篩選,***精細定位敏感數據源。豐富的***算法與仿真的字典庫相結合,保證***后數據仍具有業務屬性,數據表間關...
通過網絡遠程掛載的方式,ADM將TB量級數據拉起時間控制在分鐘級,數據恢復的響應速度極快,有效滿足開發測試、查詢分析、合規審計、應急恢復等場景對數據交付效率的要求。數據庫虛擬化技術可延伸應用到文件、虛擬機的副本創建,其優勢在于多份虛擬數據副本之間的讀寫操作單獨,完全滿足測試環境多場景同步測試的需求,ADM內置的智能讀寫緩存機制,能夠滿足壓力測試的性能要求;高效的數據副本管理功能,通過可視化的虛擬數據副本拓撲結構圖可對系統全局數據使用關系進行預覽,有助于完善測試數據的組織關系,優化測試數據的資源分配,同時,通過對拓撲結構的定位點擊可自動跳轉到相關數據副本的管理頁面并檢索出對應條目。上訊信息的自主...
上訊敏捷數據管理平臺(ADM)支持增量備份與全量快照合成技術,傳統的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續,經過一段時間就必須執行一次全量備份。因而傳統的備份方案經常面臨備份窗口過大的問題,而且其增量備份數據的恢復效率相對低下,因為每個時間點的恢復都依賴于上一次全備副本和上一次全備副本后的所有增量數據,恢復操作需要進行逐個迭代恢復。此外,過期增量數據的清理操作也受限于備份副本之間的依賴關系,不一定能及時被清理。而增量備份與全量快照合成技術,即首先執行全量備份,之后只對新增或改動過的數據進行增量備份,此增量備份數據是持續的,而且每個增量備份的數據副本將自動合成...
l虛擬化平臺數據保護ADM為用戶提供***且有針對性的虛擬化平臺保護方案,包括VMware/SmartX/浪潮/華為FC/云宏WinStack/OpenStack/浪潮云InCloudOpenStack虛擬化平臺,幫助用戶解決商業和國產虛擬化的備份和恢復業務。例如:VMware是通過調用管理虛擬機和讀寫數據的API備份接口VADP(VstorageAPISforDataProtection)進行備份。VMware備份實現了無代理備份,即無需在虛擬化平臺或者各個虛擬機上安裝客戶端代理,只需通過代理客戶端連接虛擬化平臺即可,因此幾乎不占用主機資源,不影響生產性能。支持虛擬機自動發現功能,當虛擬機發...
通過敏捷數據管理平臺ADM產品的部署實施,采用數據庫虛擬化技術,快速將數據交付到開發、測試網,有效減少開發、測試場景中測試數據的準備時間,提高了開發、測試環境搭建的效率。ADM內置獨有的高效壓縮存儲池,平均壓縮比3:1,存儲即壓縮,降低了基礎數據源獲取的存儲成本,只需一份基礎數據源,即可快速拉起多份虛擬數據庫,節約了存儲成本10倍以上。ADM通過虛擬數據庫快照功能,可以靈活地對虛擬數據庫的狀態進行管理和維護。使用人員可以隨時保存當前的數據庫使用狀態,用于開發、測試的數據版本迭代。上訊信息敏捷數據管理平臺ADM產品的數據備份模塊通過創建虛擬副本實現了本機、異機的即時掛載恢復。快照機制敏捷數據管理...
l變化數據塊跟蹤技術塊修改跟蹤技術(BlockChangeTracking)簡稱BCT,Oracle數據庫通過BCT技術可以只備份新增的或變化的數據塊,VMware通過內置的CBT技術獲取新增或變化的虛擬磁盤數據塊,從而提升增量備份效率。l備份數據傳輸壓縮加密ADM支持AES256和SM4加密算法,用戶可根據實際情況,靈活選擇。在數據傳輸過程中,通過加密算法對備份數據進行加密處理,確保抓包、***攻擊、釣魚等惡意方式所截獲的備份數據無法被解析,從而有效避免數據泄露等安全問題。數據安全領域的CDM是指copy data management。數據副本管理CDM管理控制中心(Master)是ADM...
l變化數據塊跟蹤技術塊修改跟蹤技術(BlockChangeTracking)簡稱BCT,Oracle數據庫通過BCT技術可以只備份新增的或變化的數據塊,VMware通過內置的CBT技術獲取新增或變化的虛擬磁盤數據塊,從而提升增量備份效率。l備份數據傳輸壓縮加密ADM支持AES256和SM4加密算法,用戶可根據實際情況,靈活選擇。在數據傳輸過程中,通過加密算法對備份數據進行加密處理,確保抓包、***攻擊、釣魚等惡意方式所截獲的備份數據無法被解析,從而有效避免數據泄露等安全問題。上訊ADM產品的可管理性體現在數據從上游到下游獲取、傳輸、流轉的集中式管理,同時可進行版本管理。拉起多份虛擬數據庫組織內...
通過敏捷數據管理平臺ADM產品的部署實施,采用數據庫虛擬化技術,快速將數據交付到開發、測試網,有效減少開發、測試場景中測試數據的準備時間,提高了開發、測試環境搭建的效率。ADM內置獨有的高效壓縮存儲池,平均壓縮比3:1,存儲即壓縮,降低了基礎數據源獲取的存儲成本,只需一份基礎數據源,即可快速拉起多份虛擬數據庫,節約了存儲成本10倍以上。ADM通過虛擬數據庫快照功能,可以靈活地對虛擬數據庫的狀態進行管理和維護。使用人員可以隨時保存當前的數據庫使用狀態,用于開發、測試的數據版本迭代。哪個產品支持數據進行敏感處理時的抽取組合?對象存儲管理混合IT環境下兼容性***的數據保護平臺ADM***兼容物理服...
通過敏捷數據管理平臺ADM產品的部署實施,采用數據庫虛擬化技術,快速將數據交付到開發、測試網,有效減少開發、測試場景中測試數據的準備時間,提高了開發、測試環境搭建的效率。ADM內置獨有的高效壓縮存儲池,平均壓縮比3:1,存儲即壓縮,降低了基礎數據源獲取的存儲成本,只需一份基礎數據源,即可快速拉起多份虛擬數據庫,節約了存儲成本10倍以上。ADM通過虛擬數據庫快照功能,可以靈活地對虛擬數據庫的狀態進行管理和維護。使用人員可以隨時保存當前的數據庫使用狀態,用于開發、測試的數據版本迭代。數據備份產品關注數據備份,上訊敏捷數據管理平臺ADM產品能用于數據的備份與快速恢復驗證。轉換l數據壓縮存儲ADM支持...
敏捷數據管理平臺備份數據有效性驗證場景及價值:場景:備份數據是數據安全一道防線,大部分用戶在生產網絡中已部署了如NBU、Commvault等常見備份系統,為了保證備份數據的可恢復性及可用性,需要經常對備份數據做恢復校驗,而手動恢復校驗比較耗時耗力,因此導致了做備份數據恢復校驗的頻率不夠。價值:采用ADM實現備份數據的恢復校驗,可以將NBU、Commvault等備份系統的備份策略導入到ADM平臺中,并根據備份策略創建不同的恢復任務,且恢復任務可以進行恢復排期,幫助用戶實現自動化的周期性的備份數據恢復校驗,節約了大量的人力成本,且增加了備份數據恢復的頻率,為備份數據的可恢復性可用性提供了更好的保障...
并行重刪技術是在多個不同的節點上構建指紋庫,并將指紋并行分布于多個節點,采用內存級指紋庫進行重刪,所有指紋讀寫全部保存于內存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫增大所導致的隨機IO壓力。以此識別并消除數據備份過程中數據源中重復的數據,該技術適用于不同平臺中的文件、數據庫、虛擬機等不同應用類型的數據,可以大幅度減少需要傳輸的數據量,從而極大地節省數據傳輸帶寬,解決單點性能和存儲空間壓力。海量數據供數于下游開發測試統計分析場景的數據使用需求該如何滿足?金融信息通過敏捷數據管理平臺ADM產品的部署實施,采用數據庫虛擬化技術,快速將數據交付到開發、測試網,有效減少開發、測試場景中測...
《數據安全法》第七條提出了國家鼓勵數據依法合理有效利用,保障數據依法有序自由流動的權益,即在高度重視數據安全的前提下,也要獲取數據合理利用帶來的價值,充分發揮數據作為關鍵要素的作用機制。數據的依法有序自由流動涉及數據處理的各個階段,包括數據的收集、存儲、使用、加工、傳輸、提供、公開等,各個階段構成了數據活動的全生命周期,維護數據安全就是要維護數據從產生到銷毀的全生命周期各項處理活動的安全性.維護數據安全與促進數據開發利用是相輔相成、互相促進的關系,通過開展數據安全治理能夠為數據開發利用提供安全基礎保障,進而保障公民個人信息、組織的合法權益以及國家的安全,助力我國數字經濟發展。上訊信息敏捷數據管...
ADM平臺具備根據管理人員、測試需求等內容的不同進行分組劃分的功能,將處理過的數據進行分組管理,從下游測試數據管理的源頭管控數據資源的類別,做到從源頭劃分類別,使下游測試數據管理形成上游數據源-中游數據中轉-下游數據目標的閉環式數據使用流程,規范化的數據流程使數據管理者成為數據的負責人,自動化的資源管理也更有效地為金融行業用戶提供安全的數據管理方案。同時,ADM提供對數據流轉的樹狀拓撲結構圖,可詳細了解數據的來源、所屬存儲池、掛載的測試服務器,以及數據快照的層級關系,方便對系統全局的數據使用結構進行預覽,通過可視化的結構拓撲圖,幫助用戶了解下游測試網中測試數據的歸屬關系,完善數據流轉路徑,優化...
通過智能定義敏感數據類型,自動發現和識別敏感數據,包括數據類型、內容、約束關系,靈活排序減少人為篩選,定位敏感數據源。豐富的算法與仿真的字典庫相結合,保證處理后數據仍具有業務屬性,數據表間關系仍具有業務一致性,不影響數據挖掘分析數據價值。對涉及企業、個人信息的隱私數據,包括資金財產、個人、企業隱私的對照關系進行敏感數據識別,通過內置的規則進行處理,將數據敏感部分去隱私化,但并不失去數據挖掘的價值特征,減少數據隱私泄露帶來的風險和損失,甚至降低可能發生的人身傷害和違法犯罪事件。上訊ADM產品是集數據備份管理、備份校驗管理、數據副本管理、數據脫敏管理四位一體的數據管理產品。數據庫字符編碼敏捷數據管...
上訊敏捷數據管理平臺(ADM)支持重復數據刪除技術,在典型的重復數據刪除技術中,根據不同的數據備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據輸入側不同粒度(卷級、文件級、塊級)的數據采取不同的數據切分策略,并依據任務級與全局指紋庫提供自適應源端的全局重刪算法與策略,當前支持源端塊級、文件級重刪和并行重刪技術。源端重刪是采用基于內容的可變長數據切分算法,通過對數據塊進行哈希算法的標記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數據塊,ADM則不再保存此數據塊,而是引用已存在的數據塊,從而節省更多的備份空間。該算法還可以...
上訊敏捷數據管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM架構的數據庫虛擬化等**技術,為企業上中下游數據的備份恢復、數據驗證、安全***、分發交付提供的面向數據全生命周期的安全管理解決方案。該產品通過自動化流程任務編排的方式實現了數據使用的成本控制、版本管理與開發利用,充分發揮了備份數據的潛在價值。實現生產數據備份恢復與異地容災、備份數據自動化恢復與有效性驗證、測試數據多副本快速交付、數據安全***。 上訊信息敏捷數據管理平臺ADM產品支持全域重刪技術,從而減少需要備份的數據量、縮短備份窗口。參數設置通過智能定義敏感數據類型,自動發現和...
ADM平臺具備根據管理人員、測試需求等內容的不同進行分組劃分的功能,將數據進行分組管理,從下游測試數據管理的源頭管控數據資源的類別,做到從源頭劃分類別,使下游測試數據管理形成上游數據源----中游數據中轉----下游數據目標的閉環式數據使用流程,規范化的數據流程使數據管理者成為數據的負責人,自動化的資源管理也更有效地為金融行業用戶提供安全的數據管理方案。同時,ADM提供對數據流轉的樹狀拓撲結構圖,可詳細了解數據的來源、所屬存儲池、掛載的測試服務器,以及數據快照的層級關系,方便對系統全局的數據使用結構進行預覽,通過可視化的結構拓撲圖,幫助用戶了解下游測試網中測試數據的歸屬關系,完善數據流轉路徑,...
數據流程管理是ADM功能模塊之一,主要通過靈活配置數據流轉環節實現數據管理流程的自動化作業編排,ADM采用基于畫布的方式默認作業流程的起止節點,根據實際需求將數據的獲取、恢復、***、傳輸、共享、交付、銷毀等各個環節對應的任務組件靈活拖動到作業畫布,組成一個完整的任務流程,各任務之間支持依賴關系、延時機制以及斷點處理機制,**終實現數據管理流程任務的串聯組建和并行執行,達到數據管理流程的自動化執行,協助用戶將數據交付流程的各個工作環節靈活地組合起來,實現數據交付的自動化,從而擺脫人工值守,達到縮減時間成本和人力成本的目標。上訊ADM通過數據備份后獲取到的黃金副本開啟數據開發利用的創新流程,充分...
數字化時代,企業進行數據保護,不僅希望能夠實現本地數據保護,也要有災備中心進行異地數據保護。如此,即便本地數據中心遭遇地震、火災等重大自然災害或人為操作失誤等事故,導致本地備份數據或生產數據發生損壞或丟失時,能夠通過異地數據災備,確保數據可恢復。ADM支持通過遠程復制技術,將本地數據同步到異地災備中心,實現異地數據容災。基于備份任務,將生產數據備份到本地的存儲池,基于遠程復制任務,將本地存儲池中的備份數據同步到異地存儲池中,從而為生產數據提供雙重保護,當本地生產數據、或備份數據丟失、損壞時,通過預先設置的容災策略,在容災端進行應急接管。上訊敏捷數據管理平臺ADM產品能實現敏感數據的自動化掃描發...
當前,有效的保障數據安全的方式仍然是數據備份,即企業針對生產業務的數據、文件制定備份策略生成備份數據,一旦業務數據發生丟失或損壞,則恢復備份數據提供業務訪問,傳統的數據備份方案并未提供數據的恢復驗證手段,因此企業在發生數據丟失時,啟用備份數據恢復失敗的案例屢見不鮮,這也給各行業客戶造成了巨大的經濟損失和不良的社會影響,為滿足法律的合規性要求,備份數據的恢復驗證成為備份恢復解決方案的必要需求,但由于備份數據量巨大、涉及業務系統繁多、專業人員數量有限,定期的備份數據恢復驗證仍然是一道難題,上訊敏捷數據備份恢復驗證解決方案為備份數據的恢復驗證提供了創新的技術手段,包括備份數據的分鐘級快速恢復、秒級可...
管理控制中心(Master)是ADM的集中管理和調度控制中心,是進行可視化管理的Web操作平臺。它負責集中管理ADM中的所有模塊組件,系統管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協調并執行各個角色對應的操作;數據服務節點(CDMServer)是提供數據備份與恢復、備份數據恢復驗證、副本數據創建和交付、數據復制容災功能的服務節點。用于記錄數據服務任務的配置信息、存儲情況、歷史記錄等,數據服務節點統一通過MasterIP訪問;***服務節點(SDMServer)是提供數據脫敏的服務節點,用于記錄接入平臺的敏感數據源、數據脫敏策略、***任務記錄等信息,***服務節點統一通過Mas...
ADM產品在設計過程中主要依據相關法規政策為指導,加強信息科技管理,提高信息科技風險管控能力,逐步健全信息安全管理體系,加強重點領域信息安全管理,根據信息系統在**、經濟建設、社會生活中的重要程度確定信息系統的安全保護等級。l《國家信息化領導小組關于加強信息安全保障工作的意見》l《金融行業信息系統信息安全等級保護測評指南》l《金融科技發展規劃(2022-2025年)》l《銀行業金融機構數據治理指引》l《電信和互聯網行業提升網絡數據安全保護能力專項行動方案》l《國家醫療保障局關于加強網絡安全和數據保護工作的指導意見》l《中華人民共和國網絡安全法》l《中華人民共和國數據安全法》l《中華人民共和國個...
ADM產品測試數據多副本快速交付ADM是國內**早的副本數據管理(CDM)產品,采用數據庫虛擬化技術對原始數據庫副本(黃金副本)快速生成多個虛擬數據庫作為測試數據副本,滿足開發測試場景的測試數據快速供應。?100倍數據交付效率提升10TB的數據恢復時間由原來的小時級縮短至分鐘級;?10倍工作效率提升在開發、測試環境中,使用者可隨時對虛擬庫做快照標記,快照對應著不同時間的數據版本。數據版本管理可進行任意標記的快照切換,降低數據導入或恢復產生的時間成本,大幅提升工作效率。?10倍存儲空間節省首先內置存儲池存儲即壓縮的機制可實現約3:1的數據存儲壓縮,同時交付的多個虛擬數據庫由于共享于一份原始數據,...
上訊敏捷數據管理平臺(ADM)數據異地容災主要解決本地數據同步到異地,實現異地數據保護的目標。通過制定容災策略將本地ADM中的數據同步到異地ADM中,容災的數據類型包括存儲池中的全部備份數據和虛擬副本數據,容災類型支持實時容災和定時容災,根據生產數據的容災需求制定合理的容災策略,保證為生產數據提供雙重保護。當本地生產數據或備份數據丟失、損壞時,立即啟用容災端接管業務,備份策略自動注冊到容災端管理控制中心(Master),自動接管備份任務,保證備份任務的持續不間斷運行。上訊ADM產品是集數據備份管理、備份校驗管理、數據副本管理、敏感數據處理四位一體的數據管理產品。對象存儲管理在典型的重復數據刪除...
ADM平臺具備根據管理人員、測試需求等內容的不同進行分組劃分的功能,將數據進行分組管理,從下游測試數據管理的源頭管控數據資源的類別,做到從源頭劃分類別,使下游測試數據管理形成上游數據源----中游數據中轉----下游數據目標的閉環式數據使用流程,規范化的數據流程使數據管理者成為數據的負責人,自動化的資源管理也更有效地為金融行業用戶提供安全的數據管理方案。同時,ADM提供對數據流轉的樹狀拓撲結構圖,可詳細了解數據的來源、所屬存儲池、掛載的測試服務器,以及數據快照的層級關系,方便對系統全局的數據使用結構進行預覽,通過可視化的結構拓撲圖,幫助用戶了解下游測試網中測試數據的歸屬關系,完善數據流轉路徑,...