該模塊利用能夠兼容多種數據格式的云端數據采集接口，基于一站式云服務(wù)模式，在線(xiàn)完成對政府網(wǎng)站上的文本、圖像、音頻、視頻等不同類(lèi)型網(wǎng)頁(yè)資源的采集任務(wù)，對采集獲取的網(wǎng)頁(yè)資源進(jìn)行統一格式轉換處理，將其批量保存到采集數據庫中。該模塊通過(guò)新增監控與變動(dòng)監控實(shí)時(shí)更新獲取目標政府網(wǎng)站的最新數據，確保網(wǎng)頁(yè)采集的質(zhì)量。同時(shí)采用數據加密、安全傳輸協(xié)議等方法保證網(wǎng)頁(yè)傳輸安全，確保網(wǎng)頁(yè)數據真實(shí)、完整、可信和可用。
該模塊主要包括內容管理與元數據管理兩大功能。其中內容管理的功能是對云端在線(xiàn)采集獲取的各類(lèi)政府網(wǎng)頁(yè)進(jìn)行線(xiàn)下的分類(lèi)、著(zhù)錄、標引、編目、鑒定整理，即按照設定的分類(lèi)方案，對采集獲取的海量政府網(wǎng)頁(yè)進(jìn)行自動(dòng)分類(lèi)，然后將添加元數據描述信息的政府網(wǎng)頁(yè)保存到相應的管理數據庫。元數據管理的功能則是通過(guò)確定元數據元素以及元數據的格式，明確政府網(wǎng)頁(yè)內容、結構、背景和管理過(guò)程等信息與元數據之間的關(guān)系，在相關(guān)元數據之間建立聯(lián)系，實(shí)現元數據信息的序化組織，確保政府網(wǎng)頁(yè)信息能夠長(cháng)期可利用。
該模塊基于云存儲動(dòng)態(tài)易擴展的技術(shù)特性，通過(guò)調用云存儲服務(wù)端的應用程序，對其存儲集群中相應數據庫進(jìn)行數據的插入、刪除、修改等操作，實(shí)現對海量政府網(wǎng)頁(yè)資源的實(shí)時(shí)動(dòng)態(tài)歸檔保存。此外，該模塊還具備存儲數據的云備份、云遷移等功能，能夠根據存儲數據的更新情況，利用云存儲數據加密、云端數據隔離訪(fǎng)問(wèn)、完整性驗證及可用性保護等方法，定期進(jìn)行存儲數據的在線(xiàn)備份和遷移等處理，確保云環(huán)境下歸檔政府網(wǎng)頁(yè)數據的長(cháng)期安全保存。
本文地址：http://havencoinwallet.com//article/25870.html
