大數(shù)據(jù)平臺項目軟件系統(tǒng)概要設計方案（僅用于學習的參考模板）

某地智城建設項目大數(shù)據(jù)軟件系統(tǒng)概要設計方案引言編寫目的此文檔用來描述某地大數(shù)據(jù)建設項目中的設計基準。文檔主要給設計開發(fā)人員、實施人員參考使用，包括程序系統(tǒng)的基本處理流圖、程序系統(tǒng)的組織結(jié)構(gòu)、模塊劃分、功能分配、接口設計、運行設計、數(shù)據(jù)結(jié)構(gòu)設計和安全性設計等。系統(tǒng)概述系統(tǒng)說明大數(shù)據(jù)是智慧城的基礎設施，是智慧建設的重中之重。系統(tǒng)任務系統(tǒng)目標實現(xiàn)我不同部門異構(gòu)系統(tǒng)間的資源共享和業(yè)務協(xié)同，有效避免各部門多頭投資、重復建設、資源浪費。實現(xiàn)信息資源目錄體系的統(tǒng)一管理，為各部門提供資源的檢索與定位服務，為跨部門信息資源的獲取和交換；實現(xiàn)標準的臺接入和信息交換服務，為全基礎信息庫、共享信息庫、各專業(yè)主題信息庫等的建立，提供基礎運行支撐環(huán)境和標準化規(guī)范；實現(xiàn)認證、授權(quán)等安全服務的統(tǒng)一管理，為跨部門的信息交換應用，提供基礎安全管理服務；為跨部門應用系統(tǒng)的建設，提供交換共享服務和技術(shù)支撐環(huán)境。與其他系統(tǒng)關(guān)系大數(shù)據(jù)臺建成后，為XXX提供強有力的數(shù)據(jù)支撐。通過數(shù)據(jù)共享、交換、融合，實現(xiàn)各系統(tǒng)間的相輔相成，相互促進，將數(shù)據(jù)價值充分挖掘，提升工作效能，為公眾提供更優(yōu)質(zhì)的服務。需求規(guī)定功能需求各功能模塊設計合理，符合普通用戶的操作習慣。功能界面設計合理，展現(xiàn)新穎，圖標符合功能釋義。功能模塊命名具有標識性，禁止出現(xiàn)歧義的命名規(guī)則。涉及到安全級別較高的操作，例如數(shù)據(jù)注冊、申請、使用、審批等，要強制用戶登錄；同時為了保證用戶身份的安全性，強制用戶登錄后修改初始密碼，設置密保；用戶登錄后，若一段時間內(nèi)無操作，自動退出登錄。分類系統(tǒng)、標簽系統(tǒng)命名要具有代表性，禁止隨意的命名分類、標簽，影響用戶理解。不同角色用戶權(quán)限要明確區(qū)分并實現(xiàn)控制。性能需求穩(wěn)定性穩(wěn)定性是系統(tǒng)第一考慮的因素，直接關(guān)系到用戶能不能使用。從系統(tǒng)設計、編碼實施、測試、發(fā)布等各環(huán)節(jié)都要考慮系統(tǒng)的穩(wěn)定性，負載均衡、數(shù)據(jù)容災備份等都是不可缺少的手段。尤其是在系統(tǒng)進入正式運行階段，更要制定好系統(tǒng)以及數(shù)據(jù)出現(xiàn)問題時的應對措施，避免出現(xiàn)不可恢復的“災難”。時間響應性數(shù)據(jù)是系統(tǒng)的靈魂，幾乎任何一個操作都是在操作數(shù)據(jù)。在網(wǎng)絡允許的情況下，應盡量保證操作數(shù)據(jù)響應時間在用戶的感官視覺時間范圍內(nèi)。精確性在從數(shù)據(jù)庫中讀取數(shù)據(jù)時，要求數(shù)據(jù)定位準確；在向數(shù)據(jù)庫寫入數(shù)據(jù)時，要求對錄入數(shù)據(jù)進行校驗。靈活性當需求發(fā)生某些變化時，系統(tǒng)整體設計以及實現(xiàn)基本不發(fā)生變化，只需通過簡單配置便可滿足要求。數(shù)據(jù)需求時效性大數(shù)據(jù)中數(shù)據(jù)主要來自于XXX的數(shù)據(jù)共享，為了保證數(shù)據(jù)的時效性，需制定合理的數(shù)據(jù)交換周期，嚴格按照周期更新數(shù)據(jù)，才能使系統(tǒng)提供的服務保持動態(tài)特性。數(shù)據(jù)清洗從XXX獲取到的數(shù)據(jù)格式千差萬別，同時存在著“噪聲”數(shù)據(jù)。必須制定規(guī)則，將數(shù)據(jù)清洗、歸一化處理后，入庫統(tǒng)一管理。定制化需求數(shù)據(jù)經(jīng)過數(shù)據(jù)清洗后的數(shù)據(jù)進入基礎數(shù)據(jù)庫，此庫是大數(shù)據(jù)臺的基石。要保證該數(shù)據(jù)庫的唯一性和“潔凈”，其他定制化需求需要改造數(shù)據(jù)庫結(jié)構(gòu)的要通過交換工具導出分析庫進行操作。安全性在數(shù)據(jù)交換、共享傳輸過程中，通過非對稱（用戶登錄、公用接口部分）方式來加密。對敏感信息的展示進行遮擋。其他網(wǎng)絡需求大數(shù)據(jù)系統(tǒng)臺為B/S架構(gòu)系統(tǒng)，同時數(shù)據(jù)交換共享過程中也需要各方網(wǎng)絡能夠互通互聯(lián)，需要網(wǎng)絡環(huán)境支持。存儲需求本臺交換到大量數(shù)據(jù)，同時隨著數(shù)據(jù)的定期更新、積累，數(shù)據(jù)量將不斷增加，必須保證足夠的存儲空間。服務器需求臺中涉及數(shù)據(jù)庫集群、交換節(jié)點集群、負載均衡集群等，需要足夠數(shù)量和相應配置的服務器?？傮w設計數(shù)據(jù)結(jié)構(gòu)設計依據(jù)不同用途，不同側(cè)重點以及不同使用場景，大數(shù)據(jù)臺使用的數(shù)據(jù)庫主要包括原始庫、基礎庫、專題庫。原始庫來自于各部門的原始調(diào)研數(shù)據(jù)或交換數(shù)據(jù)，可能存在較多的“噪聲”數(shù)據(jù)，無法直接提供有效的服務?；A庫以原始庫為基礎，是經(jīng)過清洗、比對等規(guī)則化處理后的數(shù)據(jù)。專題庫則是在基礎庫之上，經(jīng)過進一步的定制化處理、整理，生成的服務于各種業(yè)務指標或數(shù)據(jù)分析的庫。開發(fā)環(huán)境配置運行環(huán)境配置系統(tǒng)安全在大數(shù)據(jù)臺建設和運行過程中，定期對系統(tǒng)進行整體的風險評估。發(fā)現(xiàn)安全隱患，及時調(diào)整安全策略，實行動態(tài)防護。根據(jù)系統(tǒng)的重要程度和自身安全需求，依據(jù)國家標準《計算機信息系統(tǒng)安全保護等級劃分準則》，實行等級防護、適度防護等措施。要求所有被采用的安全產(chǎn)品都必須提供開放接口，以利于將來建設統(tǒng)一的安全管理中心，對安全事件進行有效及時的監(jiān)控和響應。將防護重點放在系統(tǒng)層和應用層的安全上。