嘉信訊通智慧政務(wù)之經(jīng)濟運行平臺解決方案
在大數(shù)據(jù)時代,數(shù)據(jù)滲透各個行業(yè),漸漸成為每個機構(gòu)的戰(zhàn)略重點和核心資產(chǎn)。擁有數(shù)據(jù)的規(guī)模、活性,以及收集、運用數(shù)據(jù)的能力,將決定一個組織的核心競爭力。掌控數(shù)據(jù)就可以深入洞察業(yè)務(wù)問題和規(guī)律,從而做出快速而精準的應(yīng)對策略,智能化決策是政府運營模式的必然轉(zhuǎn)變。
第一章 項目概述
過去很多單位和機構(gòu)對自身發(fā)展的分析只停留在數(shù)據(jù)和信息的簡單匯總層面,缺乏對業(yè)務(wù)、管理、競爭等方面的深入分析。如果決策者只憑主觀與經(jīng)驗對業(yè)務(wù)進行評估而制定決策,將導(dǎo)致戰(zhàn)略定位不準,存在很大風險。
隨著數(shù)據(jù)信息化產(chǎn)業(yè)的發(fā)展,山東省本市已經(jīng)積累了海量經(jīng)濟發(fā)展數(shù)據(jù),這些分散、獨立存在的海量數(shù)據(jù),沒有得到充分利用,因此,為了最終達到強化本市產(chǎn)業(yè)發(fā)展監(jiān)測、全面了解各個產(chǎn)業(yè)、企業(yè)經(jīng)濟發(fā)展動態(tài)、科學(xué)判斷產(chǎn)業(yè)發(fā)展態(tài)勢、切實解決本市經(jīng)濟運行過程中的各項難題的目的,通過使用大數(shù)據(jù)分析挖掘技術(shù),建立本市經(jīng)濟運行綜合數(shù)據(jù)平臺,讓大數(shù)據(jù)更好地為本市經(jīng)濟運行發(fā)展提供服務(wù)。
第二章 項目目標
依據(jù)需求,結(jié)合其實際業(yè)務(wù)目標,通過引入內(nèi)外部數(shù)據(jù),加強信息融合集聚與利用,并探索省級、市級政府數(shù)據(jù)融合和分析應(yīng)用的通用模式,利用數(shù)據(jù)挖掘技術(shù)構(gòu)建指標體系和模型,通過建立青島市經(jīng)濟運行綜合分析平臺,更直觀地反映出本市企業(yè)的經(jīng)濟發(fā)展和運營情況,協(xié)助青島市的有關(guān)管理部門發(fā)現(xiàn)業(yè)務(wù)現(xiàn)象背后的作用機制。
宏觀上監(jiān)控當?shù)亟?jīng)濟運行發(fā)展態(tài)勢,并預(yù)測其產(chǎn)業(yè)發(fā)展趨勢;微觀上對大中小型企業(yè)進行綜合評價,挖掘企業(yè)發(fā)展?jié)摿Γ瓜嚓P(guān)部門和人員能夠及時了解產(chǎn)業(yè)、企業(yè)的經(jīng)濟運行情況和重點產(chǎn)業(yè)、企業(yè)的發(fā)展動態(tài),做到對經(jīng)濟發(fā)展園區(qū)工作實時掌控,實現(xiàn)園區(qū)運營和管理的智能化、科學(xué)化,打造智慧園區(qū),為本市的產(chǎn)業(yè)發(fā)展、科技創(chuàng)新和招商引資提供有效的決策支撐。
第三章 研究內(nèi)容
3.1 數(shù)據(jù)資源與數(shù)據(jù)管理體系構(gòu)建
大數(shù)據(jù)時代,數(shù)據(jù)驅(qū)動的科學(xué)管理和科技創(chuàng)新將成為趨勢和必然,基于大數(shù)據(jù)的精準分析挖掘產(chǎn)生的量化指導(dǎo)將成為這一變革的實現(xiàn)支撐,而這一切的基礎(chǔ)是擁有豐富、大量且個性化專屬的數(shù)據(jù)資源;將多渠道、多來源、多元化的數(shù)據(jù)打造成“數(shù)數(shù)相連”標準數(shù)據(jù)資源,將是一切利用數(shù)據(jù)的行動的起點。
因此,本項目的第一要務(wù)即構(gòu)建為本市相關(guān)科學(xué)管理與決策分析研究服務(wù)的數(shù)據(jù)資源中心,并以此為試點,初步形成本市乃至本省政府數(shù)據(jù)采集、整合和標準統(tǒng)一的標本,為市、省政府宏觀數(shù)據(jù)庫的形成奠定基本的理論和實踐基礎(chǔ),成為青島市政府數(shù)字化工程的奠基石。
3.1.1 規(guī)劃構(gòu)建青島市數(shù)據(jù)資源中心
首先對數(shù)據(jù)資源進行全面梳理,規(guī)劃構(gòu)建最優(yōu)化的、具有差別化的、面向應(yīng)用主題的、本市數(shù)據(jù)資源中心,進而支持實現(xiàn)相應(yīng)分析目標的數(shù)據(jù)挖掘、多維數(shù)據(jù)分析等,主要包含以下五大方面數(shù)據(jù)資源:
(1)整合以本市企業(yè)為維度的統(tǒng)計口徑的數(shù)據(jù),主要以一套表系統(tǒng)數(shù)據(jù)和火炬系統(tǒng)數(shù)據(jù)為主,建立本市企業(yè)(被納入統(tǒng)計的)全景視圖;
(2)整合部分其它國家級本市的相關(guān)數(shù)據(jù)以及火炬計劃年鑒的數(shù)據(jù),建立國家級本市數(shù)據(jù)資源庫,用于橫向比較等分析研究;
(3)整合必要的外部宏觀經(jīng)濟數(shù)據(jù)和區(qū)域經(jīng)濟等數(shù)據(jù),形成本市經(jīng)濟分析補充數(shù)據(jù)資源庫,用于相關(guān)的分析應(yīng)用;
(4)整合省市部分相關(guān)部門的企業(yè)數(shù)據(jù)源,如:?。ㄊ校┙y(tǒng)計局、?。ㄊ校┙?jīng)信委、?。ㄊ校┌l(fā)改委、省科技廳、商務(wù)廳和市科技局等處可以協(xié)商采集的相關(guān)數(shù)據(jù),用于綜合分析園區(qū)的經(jīng)濟發(fā)展態(tài)勢;
(5)基于精準招商需求,整合相關(guān)行業(yè)的全量企業(yè)數(shù)據(jù),并在分析后形成招商對象企業(yè)數(shù)據(jù)庫,服務(wù)本市精準招商。
上述數(shù)據(jù)源將通過相關(guān)系統(tǒng)接口開發(fā)導(dǎo)入、數(shù)據(jù)格式轉(zhuǎn)換等方式進行自動、半自動的定期加載,形成動態(tài)更新的山東省本市“經(jīng)濟氣象”數(shù)據(jù)資源中心。
3.1.2 規(guī)劃建立數(shù)據(jù)管理體系 高質(zhì)量的數(shù)據(jù)是數(shù)據(jù)分析的基礎(chǔ),為此數(shù)據(jù)的產(chǎn)生、收集、清洗、存儲、整合需要一套完整的數(shù)據(jù)管理體系來支撐。數(shù)據(jù)管理體系按照數(shù)據(jù)類型可以分為元數(shù)據(jù)管理和數(shù)據(jù)質(zhì)量管理。
(1)元數(shù)據(jù)管理是數(shù)據(jù)質(zhì)量管理的基礎(chǔ)和先行條件。元數(shù)據(jù)可以簡單理解為數(shù)據(jù)的標準。確立統(tǒng)一的數(shù)據(jù)統(tǒng)計口徑標準,構(gòu)建全面、豐富的數(shù)據(jù)指標體系。形成一系列面向應(yīng)用的可更新的綜合分析專題數(shù)據(jù)庫。通過元數(shù)據(jù)管理可以很大程度上從源頭杜絕問題數(shù)據(jù)的產(chǎn)生。
(2)數(shù)據(jù)質(zhì)量是數(shù)據(jù)分析的基礎(chǔ),為此需要結(jié)合具體數(shù)據(jù)質(zhì)量問題,制定嚴密的數(shù)據(jù)質(zhì)量校核方案。為了保證數(shù)據(jù)的可靠性和可用性,在使用數(shù)據(jù)前必須要對每個準備應(yīng)用的數(shù)據(jù)項做數(shù)據(jù)質(zhì)量評估,并通過數(shù)據(jù)質(zhì)量監(jiān)控,進行問題數(shù)據(jù)追溯和問題數(shù)據(jù)處理。 數(shù)量質(zhì)量校核是針對目前園區(qū)數(shù)據(jù)管理中存在的數(shù)據(jù)質(zhì)量問題,例如完整性、一致性、準確性、規(guī)范性等問題,整合數(shù)據(jù)倉庫、數(shù)據(jù)分析、數(shù)據(jù)挖掘、可視化展現(xiàn)以及工作流等多項信息技術(shù),將結(jié)合客戶的業(yè)務(wù)規(guī)則,設(shè)計并開發(fā)數(shù)據(jù)質(zhì)量完整性模型、規(guī)范性模型、準確性模型、離群值模型、孤立點探測模型等,實現(xiàn)對業(yè)務(wù)數(shù)據(jù)的全面、專業(yè)、高效的數(shù)據(jù)質(zhì)量校核與監(jiān)控。
具體實施步驟如下:
①數(shù)據(jù)質(zhì)量模型設(shè)計可視化:可視化操作,降低業(yè)務(wù)人員技術(shù)門檻;
②數(shù)據(jù)管理校核任務(wù)流程化:采用工作流管理模式,可方便進行模型間的組合形成工作流,同時對該工作流的調(diào)度管理按照任務(wù)管理模型進行,方便易用;
③問題數(shù)據(jù)追溯智能化:對于問題數(shù)據(jù)按照業(yè)務(wù)歸屬自動推送到相關(guān)業(yè)務(wù)歸口單位,實現(xiàn)智能推送,閉環(huán)管理業(yè)務(wù)流程;
④標準六大業(yè)務(wù)模塊:數(shù)據(jù)質(zhì)量評價模塊、問題追溯模塊、模型管理模塊、可視化展現(xiàn)模型、數(shù)據(jù)質(zhì)量分析模塊、任務(wù)管理模塊。
3.1.3 數(shù)據(jù)倉庫設(shè)計及實現(xiàn)
(1)數(shù)據(jù)倉庫規(guī)劃及存儲模型搭建
數(shù)據(jù)倉庫的建設(shè)是一個戰(zhàn)略性工程,它將直接影響到數(shù)據(jù)驅(qū)動的全新管理模式的未來發(fā)展。能否成功地建立管理信息系統(tǒng)并發(fā)揮其作用,關(guān)鍵在于數(shù)據(jù)倉庫的設(shè)計和建設(shè)的速度及質(zhì)量。所以在設(shè)計開發(fā)數(shù)據(jù)倉庫時應(yīng)遵循前瞻性、實用性、安全性、可信性和科學(xué)易用性等特點。
(2)ETL設(shè)計與實現(xiàn)
數(shù)據(jù)倉庫的數(shù)據(jù)來源于業(yè)務(wù)處理系統(tǒng),但是數(shù)據(jù)倉庫的數(shù)據(jù)并不是對源系統(tǒng)數(shù)據(jù)的簡單疊加,它需要按照數(shù)據(jù)倉庫的邏輯模型和物理模型,在源系統(tǒng)數(shù)據(jù)分析的基礎(chǔ)上,按照源系統(tǒng)數(shù)據(jù)和數(shù)據(jù)倉庫數(shù)據(jù)之間的映射關(guān)系,經(jīng)過數(shù)據(jù)的抽取(Extraction)、轉(zhuǎn)換 (Transformation)和加載(Loading)等環(huán)節(jié)方可進入數(shù)據(jù)倉庫,這個過程簡稱為ETL處理。
ETL是搭建數(shù)據(jù)倉庫數(shù)據(jù)平臺的基礎(chǔ),也是保證數(shù)據(jù)倉庫的數(shù)據(jù)質(zhì)量的具體實現(xiàn)?;跀?shù)據(jù)倉庫項目開發(fā)的經(jīng)驗,在大多數(shù)據(jù)倉庫的實施過程當中,ETL都是一個非常復(fù)雜、耗時的過程,其工作量約占整個數(shù)據(jù)倉庫項目的40-50%,占數(shù)據(jù)倉庫設(shè)計階段工作量的70-80%,有許多原因影響這一階段的時間和進度,比如對原有業(yè)務(wù)系統(tǒng)和舊的操作環(huán)境的了解有限,原系統(tǒng)文檔不全等,使得ETL任務(wù)在了解舊的業(yè)務(wù)應(yīng)用以及如何抽取數(shù)據(jù)上花費了較多的時間。
ETL實施困難的另一個原因是原有的系統(tǒng)平臺沒有足夠的容量/系統(tǒng)資源來支持數(shù)據(jù)抽取處理,系統(tǒng)資源不足可能表現(xiàn)為:CPU、磁盤空間、I/O帶寬或沒有一個有效的窗口去運行抽取、轉(zhuǎn)換程序。
ETL過程不僅工作量大,而且還受到很多時間窗口的限制,它不僅需要在不同的特定(非確定)的時間抽取數(shù)據(jù),而且還必須要在特定的時間范圍內(nèi)把數(shù)據(jù)加載到數(shù)據(jù)倉庫。由于ETL過程是數(shù)據(jù)倉庫應(yīng)用系統(tǒng)每天都要進行的工作, 所以ETL設(shè)計的科學(xué)性和效率性是非常重要的,ETL設(shè)計的好壞關(guān)系到數(shù)據(jù)倉庫項目的成敗。
3.2 三大業(yè)務(wù)分析體系構(gòu)建 針對全國本市對標、經(jīng)濟運行動態(tài)掌握和精準招商三大園區(qū)業(yè)務(wù)訴求,基于上述階段構(gòu)建的大數(shù)據(jù)資源中心,通過統(tǒng)計分析和數(shù)據(jù)挖掘等方法,構(gòu)建相關(guān)模型,用模型的量化結(jié)果和分析研究成果等構(gòu)建相應(yīng)主題的分析體系,利用分析體系協(xié)助本市業(yè)務(wù)管理部門掌握相關(guān)模式和規(guī)律,找到工作提升和改進的發(fā)力點和突破口,從而進行科學(xué)決策指導(dǎo)行動。
3.2.1 本市動態(tài)綜合評價分析 基于中國火炬統(tǒng)計年鑒數(shù)據(jù)、本市火炬計劃項目數(shù)據(jù)、科技部火炬中心的國家高新技術(shù)產(chǎn)業(yè)開發(fā)區(qū)評價指標體系等盡可能多的底數(shù),運用數(shù)理模型對比不同本市評價體系的差異性,分析影響山東省本市綜合排名的重要指標,再結(jié)合有關(guān)專家的經(jīng)驗,優(yōu)化該評價模型,最終得到排名測算方法及排名提升量化結(jié)果,并固化模型形成一套山東省本市排名預(yù)警機制來綜合指導(dǎo)本市排名提升的工作具體內(nèi)容和量化值,確保本市按照預(yù)設(shè)目標實現(xiàn)排名位次。
本分析體系的主要分析內(nèi)容為以下三方面:
(1)本市火炬排名的關(guān)鍵指標對標分析 通過對企業(yè)對外的利潤總額、出口創(chuàng)匯、科技投入等重要指標進行模型打分與專家打分綜合測算,確定基準與對標值、找出待提升指標并給出量化要求,從而指導(dǎo)工作任務(wù)安排,以達成更好的績效。
(2)動態(tài)更新排名信息 通過建立系列分析模型,測算出國家級本市排名方法,并據(jù)此實時呈現(xiàn)所有與排名有關(guān)的指標,同時呈現(xiàn)山東省本市在所有國家級本市中綜合排名現(xiàn)狀及各指標對排名變化的影響程度,從而明確排名影響的大方向及可控度。
(3)年度排名預(yù)測
預(yù)測下一年度本市排名狀況,并根據(jù)下一年度排名預(yù)期目標,構(gòu)建一整套本市排名預(yù)警指標體系及相應(yīng)閥值區(qū),實時預(yù)警影響排名的關(guān)鍵性指標,并給出提升的量化要求,指導(dǎo)本市有效達成年度排名提升目標。
此外,影響排名發(fā)展的相關(guān)指標一定程度上反映產(chǎn)業(yè)發(fā)展現(xiàn)狀及存在問題,并指出改進的方向,以對科技創(chuàng)新方向、招商重點等進行決策指導(dǎo)。 國家本市排名預(yù)警機制呈現(xiàn)頁面相關(guān)示例圖:
3.2.2 經(jīng)濟發(fā)展運行分析 經(jīng)濟發(fā)展運行分析擬依托大數(shù)據(jù)相關(guān)技術(shù),宏觀上監(jiān)控整個園區(qū)的經(jīng)濟運行發(fā)展態(tài)勢,并預(yù)測其產(chǎn)業(yè)發(fā)展趨勢;微觀上對企業(yè)進行綜合評價,挖掘企業(yè)發(fā)展?jié)摿?,使領(lǐng)導(dǎo)能夠及時關(guān)注重點企業(yè)的發(fā)展動態(tài),做到對園區(qū)工作實時掌控,同時也為企業(yè)今后發(fā)展提供數(shù)據(jù)支撐。
(1)園區(qū)宏觀經(jīng)濟運行態(tài)勢及發(fā)展預(yù)測分析 基于園區(qū)積累多年的企業(yè)數(shù)據(jù),根據(jù)所屬行業(yè)進行產(chǎn)業(yè)劃分,形成園區(qū)產(chǎn)業(yè)劃分的標準體系;將資產(chǎn)、負債、主營業(yè)務(wù)收入、主營業(yè)務(wù)成本、工業(yè)總產(chǎn)值、利潤總額及應(yīng)交增值稅等重要指標按產(chǎn)業(yè)、行業(yè)進行呈現(xiàn),并運用時間序列等模型對關(guān)鍵性指標進行預(yù)測,從而宏觀把控園區(qū)整體經(jīng)濟運行態(tài)勢。同時依據(jù)本市宏觀經(jīng)濟數(shù)據(jù)相關(guān)指標進行對比分析,了解本市經(jīng)濟發(fā)展的相互影響關(guān)系。
(2)企業(yè)綜合評價分析 企業(yè)的綜合評價是根據(jù)與生產(chǎn)規(guī)模、經(jīng)營情況相關(guān)的資產(chǎn)、負債、主營業(yè)務(wù)收入、應(yīng)交增值稅等關(guān)鍵財務(wù)指標來衡量企業(yè)的在產(chǎn)業(yè)中的發(fā)展狀況。 “企業(yè)綜合評價模型”是結(jié)合園區(qū)企業(yè)數(shù)據(jù),運用特征選擇模型確定影響園區(qū)經(jīng)濟發(fā)展的重要指標,進而運用主成分分析等模型綜合評價企業(yè),并以此為企業(yè)發(fā)展提供參考。
(4)園區(qū)企業(yè)數(shù)據(jù)分析服務(wù) 企業(yè)是數(shù)據(jù)生產(chǎn)者,利用業(yè)務(wù)數(shù)據(jù)進行面向決策的分析是未來的必經(jīng)之路。但是傳統(tǒng)企業(yè)缺少專業(yè)的數(shù)據(jù)分析人員,缺乏數(shù)據(jù)獲取與分析技能,因此很多企業(yè)缺乏足夠的能力開展數(shù)據(jù)分析工作。所以通過園區(qū)企業(yè)數(shù)據(jù)分析服務(wù)的開放,幫助企業(yè)進行經(jīng)營管理決策,將來源于企業(yè)的數(shù)據(jù)直接為企業(yè)服務(wù)。
將“企業(yè)綜合評價”模塊開放給企業(yè)自身,同時將該企業(yè)的經(jīng)濟運行數(shù)據(jù)也對本企業(yè)進行開放和呈現(xiàn),使企業(yè)能夠明了自身在園區(qū)產(chǎn)業(yè)中的發(fā)展變化狀況以及優(yōu)劣指標程度,為其提供生產(chǎn)經(jīng)營的決策參考。這一模式,可使企業(yè)感受到日常向管委會上報自身數(shù)據(jù)的回饋服務(wù),嘗到數(shù)據(jù)提供的“甜頭”,可以有效提高數(shù)據(jù)上報的效率和質(zhì)量,同時為日后啟動全面企業(yè)級數(shù)據(jù)采集工作起到積極推動作用。 提供給企業(yè)的數(shù)據(jù)分析服務(wù)在分析方法上主要采用比較分析法,用來了解企業(yè)經(jīng)濟活動的成績和問題。 趨勢分析:與本公司歷史比,即不同時期指標相比。橫向比較:與同類公司比,即與行業(yè)平均數(shù)或競爭對手比較。
3.2.3 精準招商引資分析
招商信息推送服務(wù),精準招商引資分析平臺初步構(gòu)建。根據(jù)山東省本市招商定位、特點以及同類園區(qū)情況,按照本市招商部門的需要,經(jīng)相關(guān)分析后從乙方掌握的全國企業(yè)數(shù)據(jù)庫中推送所需要名單,給招商工作切實的信息補充。
第四章 技術(shù)實現(xiàn)
為了保證數(shù)據(jù)及模型結(jié)果的有序呈現(xiàn)和使用,把相關(guān)聯(lián)的業(yè)務(wù)按分析主題合理組織,即需要進行本市動態(tài)綜合評價平臺系列界面設(shè)計開發(fā)、經(jīng)濟發(fā)展運行分析平臺系列界面設(shè)計開發(fā)和精準招商引資分析平臺系列界面設(shè)計開發(fā)。 同時構(gòu)建園區(qū)今后能夠追加模型的環(huán)境,需要基于IT技術(shù)支撐和保障實現(xiàn)。通過數(shù)據(jù)庫架構(gòu)設(shè)計搭建、數(shù)據(jù)倉庫構(gòu)建及系統(tǒng)平臺設(shè)計開發(fā)、數(shù)據(jù)可視化技術(shù)嵌入及后臺管理等過程,以達到協(xié)助園區(qū)綜合管理,促進園區(qū)經(jīng)濟社會可持續(xù)發(fā)展等決策支持目標。
4.1 平臺架構(gòu)設(shè)計 能滿足用戶多種分析層次的需求,界面友好,易于使用;容易實施,方便部署,易于維護;系統(tǒng)安全性好,可靠性高,具有一定的容錯能力;系統(tǒng)具備良好的彈性、開放性,以適應(yīng)商業(yè)發(fā)展的需求;具備的強大而靈活權(quán)限控制,用戶管理能夠為用戶分配相應(yīng)的系統(tǒng)角色,并能夠定義用戶可以在系統(tǒng)中執(zhí)行哪些操作以及服務(wù)。
4.2 三個子平臺的開發(fā)實現(xiàn) 需要對本市動態(tài)綜合評價分析、經(jīng)濟發(fā)展運行分析和經(jīng)濟發(fā)展運行分析的相關(guān)指標按不同的用戶需求進行組織分類,確定指標的擺放順序、分析界面的數(shù)量、界面之間的跳轉(zhuǎn)關(guān)系等進行設(shè)計。
4.3 特殊功能模塊研發(fā)
(1)可視化技術(shù)研究和實現(xiàn):種類繁多的信息源產(chǎn)生的大量數(shù)據(jù),遠遠超出了人腦分析解釋這些數(shù)據(jù)的能力。為避免計算被浪費,需要通過友好的可視化技術(shù)對大量數(shù)據(jù)進行呈現(xiàn)解析。
(2)固定報表:用以實現(xiàn)業(yè)務(wù)分析報表的自動導(dǎo)出。具體功能:可以實現(xiàn)報表的定期自動更新;可以實現(xiàn)報表的自動批量生成;支持報表的EXCEL導(dǎo)出;支持純?yōu)g覽器的報表生成、下載和打印。
(3)智能報告:智能報告主要通過與業(yè)務(wù)人員溝通,了解其常用報告形式,據(jù)此設(shè)計開發(fā)固定格式的報告??梢詫崿F(xiàn)根據(jù)報告時間、報告主體的自定義選擇,然后單獨或者批量生成一份或多份報告。同時,可以實現(xiàn)報告的定期自動更新;可以實現(xiàn)報告的自動批量生成;支持報告的word、pdf格式導(dǎo)出;支持報告中對異常數(shù)據(jù)的自定義預(yù)警。
4.4 系統(tǒng)安全設(shè)計
本項目按照公安部《信息安全等級保護管理辦法》和《信息系統(tǒng)安全等級保護基本要求》,根據(jù)山東省本市實際情況和安全要求,進行安全設(shè)計并且建立完整的數(shù)據(jù)備份機制。
4.4.1 系統(tǒng)安全設(shè)計原則 由于在網(wǎng)絡(luò)環(huán)境下,任何用戶對任何資源包括硬件和軟件資源的共享,所以必須通過制定相應(yīng)的安全策略來防止非法訪問者訪問數(shù)據(jù)資源,對數(shù)據(jù)資源的存儲以及傳輸進行安全性保護。在本系統(tǒng)中,參考OSI的七層協(xié)議,從網(wǎng)絡(luò)級安全、傳輸級安全、系統(tǒng)級安全和應(yīng)用級安全等幾方面進行考慮,主要遵循下面的設(shè)計原則: 標識與確認:任何用戶訪問系統(tǒng)資源,必須得到系統(tǒng)的身份認證以及身份標識,如用戶的數(shù)據(jù)證書、用戶號碼、密碼。 授權(quán):對系統(tǒng)資源,包括程序、數(shù)據(jù)文件、數(shù)據(jù)庫等,根據(jù)其特性定義其保護等級;對不同的用戶,規(guī)定不同的訪問資源權(quán)限,系統(tǒng)將根據(jù)用戶權(quán)限,授予其不同等級的系統(tǒng)資源的權(quán)限。
日志:了保護數(shù)據(jù)資源的安全,在系統(tǒng)中對所保護的資源進行任何存取操作,都做相應(yīng)的記錄,形成日志存檔,完成基本的審計功能。 加密:通過整體考慮來保證網(wǎng)絡(luò)服務(wù)的可用性、網(wǎng)絡(luò)信息的保密性和網(wǎng)絡(luò)信息的完整性。 系統(tǒng)級安全:系統(tǒng)級安全主要體現(xiàn)在物理設(shè)備的安全功能以及系統(tǒng)軟件平臺的安全設(shè)置上。
4.4.2 系統(tǒng)軟件平臺的安全管理
(1)數(shù)據(jù)庫系統(tǒng)的安全管理 數(shù)據(jù)庫系統(tǒng)是整個系統(tǒng)的核心,是所有業(yè)務(wù)管理數(shù)據(jù)以及清算數(shù)據(jù)等數(shù)據(jù)存放的中心。數(shù)據(jù)庫的安全直接關(guān)系到整個系統(tǒng)的安全。在本系統(tǒng)中對此考慮如下: 數(shù)據(jù)庫管理員(SA)的密碼應(yīng)由專人負責,密碼應(yīng)該定期變換; 客戶端程序連接數(shù)據(jù)庫的用戶絕對不能使用數(shù)據(jù)庫管理員的超級用戶身份;客戶端程序連接數(shù)據(jù)庫的用戶在數(shù)據(jù)庫中必須對其進行嚴格的權(quán)限管理,控制對數(shù)據(jù)庫中每個對象的讀寫權(quán)限;利用數(shù)據(jù)庫的審計功能,以對用戶的某些操作進行記錄; 充分使用視圖以及存儲過程,保護基礎(chǔ)數(shù)據(jù)表;對于不同的應(yīng)用系統(tǒng)應(yīng)建立不同的數(shù)據(jù)庫用戶,分配不同的權(quán)限。
(2)系統(tǒng)備份 為保證系統(tǒng)長期、穩(wěn)定的運行,設(shè)計必須考慮系統(tǒng)的備份方案,根據(jù)系統(tǒng)的硬件環(huán)境,可對代碼備份和數(shù)據(jù)備份。 數(shù)據(jù)備份:數(shù)據(jù)庫的備份和恢復(fù)是保護存儲在數(shù)據(jù)庫中有關(guān)關(guān)鍵業(yè)務(wù)數(shù)據(jù)的重要保護措施。采用本機和異機兩種自動備份方式,備份周期為日備份,本機備份保留近3天的數(shù)據(jù),同時在專用的磁盤陣列中保存近30天的備份數(shù)據(jù),超過30天的數(shù)據(jù)系統(tǒng)會自動保留每月1日的備份數(shù)據(jù),最長保存時間為3年。當數(shù)據(jù)庫出現(xiàn)問題(如介質(zhì)出錯、用戶錯誤或一個服務(wù)器的永久丟失)時可將數(shù)據(jù)恢復(fù)到正常狀態(tài)。
代碼備份:主要是對本系統(tǒng)代碼以及模型文件進行及時備份,在每次對代碼部分進行更改前手動備份,保證在系統(tǒng)出現(xiàn)問題時能夠快速恢復(fù)到任意版本。
第五章工作步驟
5.1 業(yè)務(wù)調(diào)研 業(yè)務(wù)調(diào)研是乙方為充分了解甲方業(yè)務(wù)需求,而開展的調(diào)研活動。業(yè)務(wù)調(diào)研可以熟悉甲方業(yè)務(wù),核實甲方業(yè)務(wù)數(shù)據(jù)表情況,精準的把握甲方真實的業(yè)務(wù)需求,建立的模型才能更有價值和意義。
5.2 數(shù)據(jù)采集 乙方根據(jù)甲方業(yè)務(wù)需求,采集建模所需要的數(shù)據(jù),采集的數(shù)據(jù)要確保全面、完整、真實、可靠。
5.3 數(shù)據(jù)整合 乙方為保證從甲方采集來的數(shù)據(jù)規(guī)范化及數(shù)據(jù)挖掘的可用性,需要對采集到的數(shù)據(jù)進行數(shù)據(jù)整合,主要包括元數(shù)據(jù)規(guī)范化和搭建數(shù)據(jù)倉庫架構(gòu)。 數(shù)據(jù)整合可以使數(shù)據(jù)具有科學(xué)性、規(guī)范性、兼容性、一致性等一系列良好特性,能夠保證數(shù)據(jù)的規(guī)范化和數(shù)據(jù)挖掘的可用性。
5.4 數(shù)據(jù)挖掘 數(shù)據(jù)挖掘步驟是按照CRISP-DM(cross-industry standard process for data mining)的理論基礎(chǔ)進行開展,CRISP-DM即為“跨行業(yè)數(shù)據(jù)挖掘標準流程”,共有六個步驟,即業(yè)務(wù)理解、數(shù)據(jù)理解、數(shù)據(jù)準備、建立模型、模型評估、結(jié)果部署。
5.4.1 業(yè)務(wù)理解 從業(yè)務(wù)角度理解甲方需求,熟悉甲方的業(yè)務(wù)邏輯關(guān)系,并將這些知識轉(zhuǎn)化為確定的數(shù)據(jù)挖掘目標,進而完成目標的初步計劃。
5.4.2 數(shù)據(jù)理解 從初始的數(shù)據(jù)收集開始,對從本市采集到的數(shù)據(jù)進行理解,評價數(shù)據(jù)質(zhì)量,了解數(shù)據(jù)的內(nèi)部屬性,進而探測影響目標的隱含數(shù)據(jù)信息。比如,數(shù)據(jù)是否有缺失值,是否有離群值,是否有錯誤值等。
5.4.3 數(shù)據(jù)準備 數(shù)據(jù)準備階段包括從未處理的數(shù)據(jù)中構(gòu)造出模型最終所需要的綜合關(guān)聯(lián)綜合寬表數(shù)據(jù),并對選擇數(shù)據(jù)進行清洗,轉(zhuǎn)化成可以用來建立模型的標準形式。具體任務(wù)包括指標的選擇,以及通過模型工具對數(shù)據(jù)進行清洗和轉(zhuǎn)換。比如:數(shù)據(jù)清洗的過程,包括缺失值填補、離群值處理、錯誤值更換、數(shù)據(jù)分類等。
5.4.4 建立模型
經(jīng)過數(shù)據(jù)準備階段后,以三大業(yè)務(wù)分析體系的構(gòu)建為目標,選擇和應(yīng)用不同的建模技術(shù),構(gòu)建模型。一般地,有些建模算法對數(shù)據(jù)有特殊要求,因此需要經(jīng)常地跳回到數(shù)據(jù)準備階段,對數(shù)據(jù)做進一步的預(yù)處理。
5.4.5 模型評估
模型建立以后,需要驗證模型的準確性,對模型進行評估及優(yōu)化,以確保模型的科學(xué)合理性。優(yōu)化后的模型,只是一系列模型流,需要對其解讀成非專業(yè)人員可以理解的文字說明,形成標準的解讀說明文檔。
5.4.6 模型部署
模型的構(gòu)建不是項目的結(jié)束,模型的作用是從數(shù)據(jù)中找到知識,獲得的知識需要便于用戶使用的方式重新組織和展現(xiàn)。根據(jù)需求,將模型部署到相應(yīng)的平臺,實時運行模型,更好地體現(xiàn)模型應(yīng)有的價值和作用,為本市的管理決策提供有力的數(shù)據(jù)支撐。
5.5 成果呈現(xiàn)
5.5.1 報告推送 基于對三大業(yè)務(wù)分析體系的構(gòu)建,并根據(jù)數(shù)據(jù)的更新頻次,實時推送本市綜合評價報告、行業(yè)分類報告、產(chǎn)業(yè)發(fā)展及產(chǎn)業(yè)企業(yè)投資活躍度報告。
5.5.2 企業(yè)名單推送 通過一系列咨詢與分析定時推送相關(guān)領(lǐng)域的龍頭企業(yè)名單、有代表性的行業(yè)重點企業(yè)名單和行業(yè)中科技評價領(lǐng)先的企業(yè)單位(涵蓋行業(yè)龍頭企業(yè)、重點企業(yè)及中小微企業(yè)),這些企業(yè)名單(每月20家)均在平臺中自動生成并月度更新,同時滿足用戶根據(jù)設(shè)定的條件,篩選出符合條件的候選企業(yè)名單。
如果您希望進一步了解該項目的詳細信息可以聯(lián)系公眾號作者,我們?yōu)槠髽I(yè)、公司、機構(gòu)提供經(jīng)濟運行平臺的需求調(diào)研、定制化開發(fā),部署、維護、升級等一系列操作。
青島嘉信訊通信息有限公司是一家專業(yè)從事計算機軟件相關(guān)業(yè)務(wù)的高新技術(shù)企業(yè)。為國內(nèi)和國外的客戶提供軟件和集成項目的整體解決方案。
主要營業(yè)內(nèi)容:軟件業(yè)務(wù)、數(shù)字安全服務(wù)、網(wǎng)絡(luò)視頻服務(wù)、物聯(lián)網(wǎng)平臺運營。
軟件業(yè)務(wù):軟件平臺開發(fā)、手機APP(安卓、蘋果)、微信、小程序、技術(shù)咨詢、產(chǎn)品銷售等。
數(shù)字安全服務(wù):電子合同簽署、招投標平臺簽署、網(wǎng)絡(luò)數(shù)字安全認證服務(wù)等。
網(wǎng)絡(luò)視頻服務(wù):網(wǎng)絡(luò)視頻的整體解決方案、系統(tǒng)集成和弱電施工等。
物聯(lián)網(wǎng)平臺運營:智能硬件終端的電壓、電流、溫度、濕度、定位信息的采集和遠程控制,大數(shù)據(jù)分析。
在國內(nèi)的合作伙伴主要有聯(lián)通、海爾、海信、青島地鐵、興業(yè)銀行、北京數(shù)字認證、清華同方等上市公司。
在國外的合作伙伴主要有NEC、富士通、軟腦、大手海恩等上市企業(yè)。