該項目中,共包含一個中央云中心集群和六個地方分中心集群在內的七個分布式數(shù)據(jù)存儲子集群,不同數(shù)據(jù)中心間的數(shù)據(jù)可以跨數(shù)據(jù)中心流動??梢灾С謹?shù)據(jù)存儲、讀取、各種形式的檢索、基于任務的分析、分布式數(shù)據(jù)安全保護策略、在線容量擴展、數(shù)據(jù)訪問控制以及對于數(shù)據(jù)平臺監(jiān)控管理、日志審計管理等核心業(yè)務實現(xiàn)的底層基礎系統(tǒng)支撐。
跨數(shù)據(jù)中心管理子模塊解決異地數(shù)據(jù)中心的副本管理。包括跨數(shù)據(jù)中心數(shù)據(jù)實時同步和數(shù)據(jù)不一致性自恢復機制??鐢?shù)據(jù)中心系統(tǒng)的設計目的同樣是從保證數(shù)據(jù)的安全性為出發(fā)點,以杜絕數(shù)據(jù)丟失的可能性??鐢?shù)據(jù)中心系統(tǒng)的技術基礎集合了數(shù)據(jù)庫操作,信息通知機制及HTTP數(shù)據(jù)傳輸方式三大技術要點。
用戶對于整體系統(tǒng)的監(jiān)控是另外一個重點,本系統(tǒng)使用了賽思分布式存儲管理監(jiān)控系統(tǒng),監(jiān)控系統(tǒng)不僅可以實現(xiàn)對于自身訪問用戶的權限控制,同時也實現(xiàn)了分布式存儲子系統(tǒng)對于集群中各節(jié)點的CPU、磁盤、內存等相關重要硬件資源的使用情況的數(shù)據(jù)采集功能,為系統(tǒng)維護人員,供管理人員與運維人員的工作提供了依據(jù)與便利。同時支持的日志審計管理功能則是供管理員日常查閱及后期追溯之用。
系統(tǒng)使用到的賽思產品有:
iDriller 賽思分布式數(shù)據(jù)倉庫
iHyperDB 賽思海量非結構化數(shù)據(jù)庫
iSwapper 賽思大數(shù)據(jù)集成引擎
iManager 賽思大數(shù)據(jù)運維管理引擎
用戶效益:
實現(xiàn)了對檔案信息的智能檢索。檔案系統(tǒng)借助賽思信安大數(shù)據(jù)解決方案,不僅擴充了對檔案信息的多類型、高效率、跨信息源的智能檢索功能
實現(xiàn)了檔案資源跨地區(qū)共享和數(shù)據(jù)的全面整合。本系統(tǒng)實現(xiàn)了分布在全國各個檔案館的數(shù)據(jù)統(tǒng)一整合,形成了檔案館的一體化管理,極大地提升了信息的分享能力和充分發(fā)揮了檔案資料的使用效率,充分滿足各級檔案業(yè)務人員數(shù)據(jù)實時交互的共享需求。
建設了分析預測平臺、實現(xiàn)了檔案關聯(lián)分析、提升用戶的應用能力。實現(xiàn)復雜預測及決策分析,助力檔案業(yè)務應用能力提升。對業(yè)務分析系統(tǒng)提供多種統(tǒng)計功能,包括分組、排序以及聚合等,以及海量結構化和非結構化檔案數(shù)據(jù)的分布式存儲與集中管理。
提高了數(shù)據(jù)的安全性。建立了全國的統(tǒng)一用戶管理機制,設定了權限控制機制,設立了設計機制,確保任何時候都清楚誰在看,誰看過,誰能看的規(guī)范。同時系統(tǒng)設立了多中心機制,多中心之間數(shù)據(jù)互備,數(shù)據(jù)多副本保存,數(shù)據(jù)異地容災,避免了單點故障和單城市故障,提高了數(shù)據(jù)的安全性。
案例總結:
基于對項目需求的深刻理解及在大數(shù)據(jù)領域自主研發(fā)的多年積累,北京賽思信安技術有限公司憑借在分布式存儲系統(tǒng)、跨數(shù)據(jù)中心管理、云備份管理、數(shù)據(jù)庫資源設計等技術方面的雄厚實力,以及在分享與利用方面的諸多創(chuàng)新理念,賽思信安自主研發(fā)的大數(shù)據(jù)管理平臺(Scistor dataFusion)在眾多競爭產品中脫穎而出,成功的應用于該系統(tǒng)建設。
本系統(tǒng)實現(xiàn)了全文檢索、結構化數(shù)據(jù)和文本數(shù)據(jù)一體化檢索,分布式存儲與集中管理等基礎服務功能,進一步完善檔案管理的標準體系的建設,同時探索為經濟欠發(fā)達或技術力量薄弱地區(qū)檔案館建設檔案信息綜合管理系統(tǒng)提供了良好的借鑒經驗。賽思信安智慧檔案大數(shù)據(jù)解決方案讓檔案服務民生的能力更強大,讓“中國記憶”最大限度的發(fā)揮自身價值,方便人民大眾對檔案信息的查找、分享與利用,從而為全社會提供不受時間、空間限制的社會化、集約化、專業(yè)化的開放檔案信息資源共享服務。