時(shí)間：2023-03-22 17:34:16
導(dǎo)語(yǔ)：在數(shù)據(jù)統(tǒng)計(jì)論文的撰寫(xiě)旅程中，學(xué)習(xí)并吸收他人佳作的精髓是一條寶貴的路徑，好期刊匯集了九篇優(yōu)秀范文，愿這些內(nèi)容能夠啟發(fā)您的創(chuàng)作靈感，引領(lǐng)您探索更多的創(chuàng)作可能。
【關(guān)鍵詞】網(wǎng)絡(luò)數(shù)據(jù) 系統(tǒng)
1 醫(yī)院學(xué)術(shù)論文管理情況現(xiàn)狀
隨著計(jì)算機(jī)的廣泛應(yīng)用，絕大多數(shù)醫(yī)院管理論文的方法已經(jīng)從手工登記轉(zhuǎn)變?yōu)槭褂糜?jì)算機(jī)軟件管理，其中最為普及的是使用Excel軟件制作電子表格登記論文資料。這種方法可以較好地幫助工作人員解決查找和數(shù)據(jù)統(tǒng)計(jì)的問(wèn)題。但是，數(shù)據(jù)的收集需要做大量的前期工作，由論文作者上報(bào)至科教科，再由科教科工作人員進(jìn)行手工錄入制成Excel表格，需要生成報(bào)表和統(tǒng)計(jì)數(shù)據(jù)的時(shí)候也必須手動(dòng)操作。
大量繁瑣枯燥的手工錄入工作制成的Excel的本地文件，卻并不能較好的實(shí)現(xiàn)數(shù)據(jù)共享。因此，隨著網(wǎng)絡(luò)的普及，部分醫(yī)院建立了基于Web的論文管理系統(tǒng)。依靠B/S架構(gòu)的Web論文管理系統(tǒng)，可以很好的解決數(shù)據(jù)共享的問(wèn)題。相比于使用Excel文件記錄論文數(shù)據(jù)，網(wǎng)絡(luò)論文管理系統(tǒng)的優(yōu)點(diǎn)在于只要有可用的網(wǎng)絡(luò)，無(wú)論何時(shí)何地都可以通過(guò)手機(jī)或個(gè)人計(jì)算機(jī)進(jìn)入系統(tǒng)，進(jìn)行論文上報(bào)、登記、查詢操作，使論文管理工作不僅限于辦公室。并且依靠計(jì)算機(jī)技術(shù)也可以一定程度的簡(jiǎn)化手工工作，以鼠標(biāo)點(diǎn)選、自動(dòng)生成等方式優(yōu)化錄入、統(tǒng)計(jì)分析的過(guò)程。
2 基于網(wǎng)絡(luò)數(shù)據(jù)抓取的醫(yī)院論文管理系統(tǒng)
基于網(wǎng)絡(luò)數(shù)據(jù)抓取的醫(yī)院論文管理系統(tǒng)保留了普通網(wǎng)絡(luò)論文管理系統(tǒng)的優(yōu)點(diǎn)，著力優(yōu)化和完善最為繁瑣的數(shù)據(jù)錄入過(guò)程，從國(guó)內(nèi)權(quán)威的論文數(shù)據(jù)庫(kù)中直接抓取需要的數(shù)據(jù)存入自己的數(shù)據(jù)庫(kù)。
據(jù)了解，國(guó)內(nèi)絕大部分正規(guī)期刊上發(fā)表的文獻(xiàn)在見(jiàn)刊1-2個(gè)月后就會(huì)被知網(wǎng)、萬(wàn)方、維普等專業(yè)的文獻(xiàn)數(shù)據(jù)庫(kù)收錄。普通用戶通過(guò)檢索，可以獲取到論文的題目、發(fā)表刊物、見(jiàn)刊時(shí)間、作者姓名、單位、關(guān)鍵詞、摘要等數(shù)據(jù)，足以滿足醫(yī)院論文管理系統(tǒng)的需求。只要實(shí)現(xiàn)并使用抓取功能獲得需要的數(shù)據(jù)，就能大大簡(jiǎn)化手工錄入的工作，同時(shí)能有效的避免論文漏報(bào)、錯(cuò)報(bào)。
2.1 系統(tǒng)的體系結(jié)構(gòu)
目前基于網(wǎng)絡(luò)的系統(tǒng)體系結(jié)構(gòu)主要是C/S（客戶端/服務(wù)器）架構(gòu)與B/S（瀏覽器/服務(wù)器）架構(gòu)。C/S架構(gòu)將大部分的運(yùn)算放在客戶端處理，要求進(jìn)入系統(tǒng)的計(jì)算機(jī)安裝相應(yīng)的客戶端程序，對(duì)計(jì)算機(jī)操作系統(tǒng)等條件有特定的要求，限制了用戶群，具有較高的安全性，但是靈活性不強(qiáng)，不便于后期維護(hù)和系統(tǒng)升級(jí)。B/S架構(gòu)基于HTTP和TCP/IP協(xié)議，運(yùn)用服務(wù)器完成大量的運(yùn)算，將運(yùn)算結(jié)果傳輸給瀏覽器顯示，用戶只需要使用瀏覽器就可以在個(gè)人計(jì)算機(jī)或智能手機(jī)上進(jìn)行操作，不受局域網(wǎng)、軟件和運(yùn)行平臺(tái)的限制，可以實(shí)現(xiàn)跨平臺(tái)的使用，并且后期維護(hù)成本低，更新方便。
為了系統(tǒng)后期的維護(hù)及功能完善，本系統(tǒng)采用B/S架構(gòu)，也更能適應(yīng)目前信息系統(tǒng)的發(fā)展趨勢(shì)。
2.2 系統(tǒng)的功能模塊
如圖1所示，本系統(tǒng)分為五個(gè)功能模塊，分別為：部門(mén)管理模塊、職工管理模塊、論文抓取模塊、論文錄入模塊、查詢統(tǒng)計(jì)模塊。
2.2.1 部門(mén)管理模塊
部門(mén)管理模塊的主要功能是通過(guò)添加、修改、刪除操作設(shè)置醫(yī)院部門(mén)信息，構(gòu)建一個(gè)完整的部門(mén)樹(shù)形結(jié)構(gòu)，以便在查詢統(tǒng)計(jì)時(shí)可以實(shí)現(xiàn)按照部門(mén)查詢統(tǒng)計(jì)，有助于分析和比較各科室部門(mén)的情況。
2.2.2 職工管理模塊
職工管理模塊同樣通過(guò)數(shù)據(jù)庫(kù)的操作建立職工的花名冊(cè)，并且將每個(gè)職工按照實(shí)際情況分配到科室和部門(mén)，如此便建立了論文、作者、部門(mén)的關(guān)系。
2.2.3 論文數(shù)據(jù)抓取模塊
論文數(shù)據(jù)抓取模塊使用網(wǎng)絡(luò)數(shù)據(jù)抓取的方法，通過(guò)請(qǐng)求URL、對(duì)返回?cái)?shù)據(jù)進(jìn)行分析、提取論文相關(guān)數(shù)據(jù)，將其存入論文信息表，并與醫(yī)院職工進(jìn)行關(guān)聯(lián)。
2.2.4 論文數(shù)據(jù)錄入模塊
本模塊的主要功能是手工維護(hù)論文數(shù)據(jù)，以對(duì)論文數(shù)據(jù)的添加、修改、刪除操作，提供是一個(gè)查缺補(bǔ)漏渠道，對(duì)數(shù)據(jù)抓取過(guò)程中出現(xiàn)的不完善數(shù)據(jù)進(jìn)行人工修改。
2.2.5 統(tǒng)計(jì)查詢模塊
模塊提供作者姓名查詢、關(guān)鍵詞查詢、期刊查詢、發(fā)表時(shí)間查詢、科室查詢等豐富的查詢方法。統(tǒng)計(jì)各科室數(shù)量、各種期刊上的數(shù)量、關(guān)鍵詞相關(guān)論文數(shù)量、任意時(shí)間段數(shù)量等以供比較分析。
2.3 網(wǎng)絡(luò)數(shù)據(jù)抓取模塊設(shè)計(jì)
數(shù)據(jù)抓取功能是本系統(tǒng)的特色和亮點(diǎn)，其設(shè)計(jì)原理類似于簡(jiǎn)化的網(wǎng)絡(luò)爬蟲(chóng)，抓取數(shù)據(jù)更具針對(duì)性，抓取范圍僅限于較權(quán)威的論文期刊數(shù)據(jù)庫(kù)。以下介紹設(shè)計(jì)思路。
2.3.1 抓取模塊涉及的數(shù)據(jù)庫(kù)設(shè)計(jì)
為了能在網(wǎng)絡(luò)上抓取數(shù)據(jù)，需要一個(gè)表存放URL信息，其中包括的主要字段有URL、URL的MD5編碼、訪問(wèn)狀態(tài)、請(qǐng)求的頁(yè)面類型等。
另外需要一個(gè)存放論文信息的表存放抓取到的數(shù)據(jù)，包含題目、刊名、發(fā)表時(shí)間、作者、關(guān)鍵詞、摘要等字段。
2.3.2 抓取數(shù)據(jù)的主要步驟
首先程序從URL表中取出一條訪問(wèn)狀態(tài)為未訪問(wèn)的數(shù)據(jù)，請(qǐng)求此URL并接收返回?cái)?shù)據(jù)，根據(jù)URL請(qǐng)求的頁(yè)面類型做提取論數(shù)據(jù)或者提取URL數(shù)據(jù)的操作。
對(duì)于返回的是論文頁(yè)面，需要提取論文詳細(xì)信息，然后到論文信息表中查找，判斷是否為已經(jīng)抓取過(guò)的論文數(shù)據(jù)，若已抓取，則標(biāo)記請(qǐng)求的URL為已訪問(wèn)，然后進(jìn)行下一個(gè)URL的請(qǐng)求。否則將論文數(shù)據(jù)整理并入庫(kù)，將作者與職工關(guān)聯(lián)，之后請(qǐng)求下一個(gè)URL。
若非論文詳情頁(yè)面，則需分離提取頁(yè)面中的URL，將提取到的URL逐個(gè)進(jìn)行MD5編碼后到URL表中，將非重?cái)?shù)據(jù)標(biāo)記為未訪問(wèn)然后入庫(kù)。
3 實(shí)現(xiàn)本系統(tǒng)的意義
基于網(wǎng)絡(luò)數(shù)據(jù)抓取的醫(yī)院論文管理系統(tǒng)可以有效地減少論文管理過(guò)程中的繁瑣工作，簡(jiǎn)化管理流程，為管理人員減負(fù)。同時(shí)，得益于系統(tǒng)采用B/S架構(gòu)，可以實(shí)現(xiàn)跨平臺(tái)、跨區(qū)域的管理。抓取來(lái)自論文數(shù)據(jù)庫(kù)的數(shù)據(jù)相對(duì)全面，以此數(shù)據(jù)做出的分析統(tǒng)計(jì)能夠更加有效的指導(dǎo)醫(yī)院科研的發(fā)展方向和重心。設(shè)計(jì)并實(shí)現(xiàn)本系統(tǒng)，有效地提高了科教管理工作效率。
1.1 色散
在光纖信號(hào)的傳輸過(guò)程中，不同成分的光源群在傳輸速度上存在一定的差異，這種差異會(huì)產(chǎn)生一定的時(shí)間延遲，從而形成色散。色散主要包括模式色散、色度色散以及偏振色散三種類型，其中色度色散又可以分為材料色散和波導(dǎo)色散兩種，色散問(wèn)題在超長(zhǎng)距離光纖通信中表現(xiàn)得尤為明顯。目前，傳統(tǒng)的方法是通過(guò)利用具有負(fù)色散系數(shù)性質(zhì)的DCF進(jìn)行色散補(bǔ)償，但是該方法存在十分顯著的非線性效應(yīng)，會(huì)產(chǎn)生較大的損耗，而且這種損耗隨補(bǔ)償距離的增加而增大，在超長(zhǎng)距離通信系統(tǒng)中采用該方案會(huì)產(chǎn)生極高的成本。針對(duì)傳統(tǒng)色散補(bǔ)償方法成本過(guò)高的問(wèn)題，已經(jīng)有廠家開(kāi)發(fā)出了FBG色散補(bǔ)償模塊，該模塊能夠利用光柵對(duì)不同波長(zhǎng)的發(fā)射特性實(shí)現(xiàn)對(duì)色散的補(bǔ)償，其損耗值與補(bǔ)償距離無(wú)關(guān)，有效彌補(bǔ)了傳統(tǒng)補(bǔ)償方法的缺點(diǎn)。
1.2 信噪比
在長(zhǎng)距離通信系統(tǒng)中，光放大器在放大光信號(hào)的同時(shí)，會(huì)產(chǎn)生一定程度的自發(fā)輻射放大噪聲，由于線路的長(zhǎng)度較長(zhǎng)，因此會(huì)產(chǎn)生較大的損耗，信號(hào)衰減十分嚴(yán)重，在經(jīng)過(guò)放大器放大之后，這種放大噪聲很可能與信號(hào)能量非常接近，導(dǎo)致接收端無(wú)法正常的分辨信號(hào)，影響系統(tǒng)的正常運(yùn)行。針對(duì)這類問(wèn)題，一般在前置放大器中加裝濾波器，這樣能夠過(guò)濾掉信號(hào)光周邊的部分噪聲信號(hào)，從而提高信噪比。
1.3 功率
在超長(zhǎng)距離通信系統(tǒng)中，光纖信號(hào)在傳輸時(shí)，由于光波與傳播媒介之間的相互作用會(huì)導(dǎo)致光能發(fā)生一定程度的衰減，當(dāng)能量衰減到一定程度之后，接收端無(wú)法從噪聲中正確的辨識(shí)出光信號(hào)，限制正常的光通信。針對(duì)這些問(wèn)題，一般通過(guò)功率補(bǔ)償?shù)姆绞絹?lái)降低信號(hào)衰減所產(chǎn)生的損耗。目前在超長(zhǎng)距離通信系統(tǒng)中采用的最主要手段是EDFA。EDFA分為功率放大器和前置放大器，其中功率放大器通常配置在傳輸系統(tǒng)的發(fā)射端后，以最大限度提升發(fā)射功率，前置放大器通常配置在接收端前，主要作用是提高接收靈敏度。當(dāng)通信線路的長(zhǎng)度達(dá)到一定距離后，僅僅采用功率放大器和前置放大器很難保證接收端正常的接收信號(hào)，此時(shí)需要在該方法的基礎(chǔ)上對(duì)光源進(jìn)行附加調(diào)制或采用外接調(diào)制器進(jìn)行附加調(diào)相，從而增大入射光的譜寬。目前，該方法在國(guó)家電網(wǎng)以及南方電網(wǎng)的超高壓輸電公司中得到了較好的應(yīng)用。
二、超長(zhǎng)距離通信技術(shù)在電力系統(tǒng)中的應(yīng)用方案
我國(guó)的超長(zhǎng)距離通信從2007年開(kāi)始試驗(yàn)，最初是由光迅科技與南方電網(wǎng)超高壓輸電公司進(jìn)行合作所進(jìn)行的長(zhǎng)度為345km的2.5Gbit/s的超長(zhǎng)距離無(wú)中繼通信工程，該段線路中配置了FEC、EDFA、RFA及光柵型DCM，系統(tǒng)保持了3個(gè)月的試運(yùn)行，其整個(gè)運(yùn)行過(guò)程的測(cè)試結(jié)果均十分良好。南方電網(wǎng)在“十一五”黔電送粵施秉——賢令山500kV輸電工程中，對(duì)上述技術(shù)進(jìn)行了廣泛的使用，在該輸電工程中，采用超長(zhǎng)距離通信技術(shù)的線路跨度長(zhǎng)達(dá)318km。系統(tǒng)從2008年7月開(kāi)始運(yùn)行以來(lái)，一直保持十分穩(wěn)定的工作狀態(tài)，此系統(tǒng)也是我國(guó)到目前為止唯一沒(méi)有設(shè)置中繼站而傳輸距離超過(guò)300km的實(shí)際工程。根據(jù)設(shè)計(jì)中的預(yù)算，相對(duì)于實(shí)際已建成的系統(tǒng)而言，采用中繼站將會(huì)增加約200萬(wàn)元的成本。由此也可以看出，通過(guò)超長(zhǎng)距無(wú)中繼通信技術(shù)在電力系統(tǒng)中的運(yùn)用，能夠使電力通信系統(tǒng)的經(jīng)濟(jì)性及運(yùn)行可靠性大大提升，同時(shí)也使得通信系統(tǒng)的維護(hù)難度大幅度降低。此后，該技術(shù)在多項(xiàng)電力通信工程中得到廣泛應(yīng)用。
三、結(jié)論
1.1異步轉(zhuǎn)換技術(shù)
這種技術(shù)是一種面向連接寬帶的交換技術(shù),是傳統(tǒng)分組交換技術(shù)和電路交換技術(shù)的延伸和發(fā)展。該技術(shù)是使用定長(zhǎng)分組把語(yǔ)音和圖像等信息分解成固定長(zhǎng)度53b的信息,定長(zhǎng)分組就是信元。作用機(jī)制是將信元作為單位進(jìn)行復(fù)接、傳輸、交換,獲得了空信元就可以插入信息,且插入的位置可以是隨意的,然后進(jìn)行信息傳輸。這種技術(shù)的優(yōu)點(diǎn)是能進(jìn)行無(wú)連接傳輸,有助于寬帶高速交換,簡(jiǎn)化了網(wǎng)絡(luò)協(xié)議和功能等。主要業(yè)務(wù)有互聯(lián)局域網(wǎng)、虛擬局域網(wǎng)組建、支持無(wú)連接數(shù)據(jù)通信業(yè)務(wù)、支持幀中繼業(yè)務(wù)等。
1.2光交換技術(shù)
這是建立在光纖介質(zhì)上的交換技術(shù),可以分為波分光交換技術(shù)、時(shí)分光交換技術(shù)和空分光交換技術(shù)。波分光交換技術(shù)的基礎(chǔ)是波分復(fù)用技術(shù),能開(kāi)展超大容量的數(shù)據(jù)傳輸,采用的方法是波長(zhǎng)變換和波長(zhǎng)選擇。該技術(shù)分別有N條輸入和輸出管線,且每條光纖都是借助波分復(fù)用技術(shù)有n個(gè)波長(zhǎng)的載波信號(hào),并在每個(gè)復(fù)用器之間實(shí)現(xiàn)N路光纖的n個(gè)波長(zhǎng)信號(hào)交換的。時(shí)分光交換技術(shù)的基礎(chǔ)上時(shí)分復(fù)用技術(shù),原理是時(shí)隙互換。時(shí)分復(fù)用技術(shù)是將時(shí)間化成好多幀,將每個(gè)幀劃分成N個(gè)長(zhǎng)度一樣的時(shí)隙,并將時(shí)隙分別分給N個(gè)信號(hào),最后將N個(gè)信號(hào)復(fù)接到一條光纖上的傳輸技術(shù)。空分光交換技術(shù)的基礎(chǔ)是光開(kāi)關(guān)技術(shù),通過(guò)光開(kāi)關(guān)技術(shù)把光信號(hào)的傳送通路進(jìn)行變化,達(dá)到傳輸?shù)哪康?。此?光交換技術(shù)還有一種是對(duì)上述三個(gè)技術(shù)的組合,形成組合光交換技術(shù)。組合光交換技術(shù)主要是由光開(kāi)關(guān)陣列和波分復(fù)用器組成的。
2強(qiáng)化交換技術(shù)在現(xiàn)代數(shù)據(jù)通信中作用的建議
在現(xiàn)代數(shù)據(jù)通信中,選擇并使用合適的交換技術(shù)是至關(guān)重要的,尤其是對(duì)提高數(shù)據(jù)通信質(zhì)量有直接影響。要想充分發(fā)揮交換技術(shù)在現(xiàn)代數(shù)據(jù)通信中的作用,很重要的一個(gè)衡量指標(biāo)是要確保數(shù)據(jù)通信的可靠性和有效性,即保障數(shù)據(jù)通信質(zhì)量。為了強(qiáng)化換技術(shù)在現(xiàn)代數(shù)據(jù)通信中的作用,提高數(shù)據(jù)通信質(zhì)量,必須做到以下幾點(diǎn)。
(1)制定科學(xué)合理的通信協(xié)議。即要盡量減少數(shù)據(jù)包的長(zhǎng)度,可以使用長(zhǎng)度字節(jié)來(lái)對(duì)數(shù)據(jù)包長(zhǎng)度進(jìn)行標(biāo)志;已經(jīng)制定好的通信協(xié)議要經(jīng)過(guò)多次驗(yàn)證,提高有效性;可以采用合理的幀進(jìn)行同步標(biāo)志。
(2)最大程度的降低波特率相對(duì)誤差。
(3)合理使用軟件抗干擾技術(shù)。軟件抗干擾技術(shù)是一種單片機(jī)系統(tǒng)的自身防御,系統(tǒng)中控制程序代碼必須要不被損壞是該技術(shù)的使用前提。
3結(jié)語(yǔ)
網(wǎng)絡(luò)通信有一定的風(fēng)險(xiǎn)性，對(duì)數(shù)據(jù)加密技術(shù)的需求比較大，結(jié)合網(wǎng)絡(luò)通信的實(shí)踐應(yīng)用，通過(guò)例舉網(wǎng)絡(luò)通信中的風(fēng)險(xiǎn)表現(xiàn)，分析其對(duì)數(shù)據(jù)加密技術(shù)的需求。網(wǎng)絡(luò)通信的安全風(fēng)險(xiǎn)有：①網(wǎng)絡(luò)通信的過(guò)程中，面臨著攻擊者的監(jiān)聽(tīng)、竊取破壞，很容易丟失傳輸中的數(shù)據(jù)信息；②攻擊者隨意更改網(wǎng)絡(luò)通信中的信息，冒充管理者截取傳輸信息，導(dǎo)致網(wǎng)絡(luò)通信的數(shù)據(jù)丟失；③網(wǎng)絡(luò)通信中的數(shù)據(jù)信息被惡意復(fù)制，引起了系統(tǒng)癱瘓、信息不準(zhǔn)確的問(wèn)題。由此可見(jiàn)：網(wǎng)絡(luò)通信中，必須強(qiáng)化數(shù)據(jù)加密技術(shù)的應(yīng)用，采取數(shù)據(jù)加密技術(shù)，保護(hù)網(wǎng)絡(luò)通信的整個(gè)過(guò)程，預(yù)防攻擊行為，提高網(wǎng)絡(luò)通信的安全水平，避免出現(xiàn)惡意攻擊的現(xiàn)象，保障網(wǎng)絡(luò)通信的安全性和積極性，表明數(shù)據(jù)加密技術(shù)的重要性，進(jìn)而完善網(wǎng)絡(luò)通信的環(huán)境。
2數(shù)據(jù)加密技術(shù)在網(wǎng)絡(luò)通信中的應(yīng)用
數(shù)據(jù)加密技術(shù)提升了網(wǎng)絡(luò)通信的安全性，規(guī)范了網(wǎng)絡(luò)通信的運(yùn)營(yíng)環(huán)境，規(guī)避了潛在的風(fēng)險(xiǎn)因素。網(wǎng)絡(luò)通信中的數(shù)據(jù)加密，主要分為方法和技術(shù)兩部分，對(duì)其做如下分析：
2.1網(wǎng)絡(luò)通信中的數(shù)據(jù)加密方法
2.1.1對(duì)稱加密
對(duì)稱加密方法在網(wǎng)絡(luò)通信中比較常用，利用相同的密鑰，完成通信數(shù)據(jù)加密到解密的過(guò)程，降低了數(shù)據(jù)加密的難度。對(duì)稱加密中，比較有代表性的方法是DES加密，屬于標(biāo)準(zhǔn)對(duì)稱加密的方法。例如：DES在網(wǎng)絡(luò)通信中的應(yīng)用，使用了固定的加密框架，DES通過(guò)密鑰，迭代子密鑰，將56bit密鑰分解成16組48bit，迭代的過(guò)程中進(jìn)行加密，而解密的過(guò)程與加密流程相似，使用的密鑰也完全相同，加密與解密密鑰的使用正好相反，根據(jù)網(wǎng)絡(luò)通信的數(shù)據(jù)類型，完成對(duì)稱加密。
2.1.2非對(duì)稱加密
非對(duì)稱加密方法的難度稍高，加密與解密的過(guò)程，采用了不同的密鑰，以公鑰、私鑰的方式，對(duì)網(wǎng)絡(luò)通信實(shí)行非對(duì)稱加密。公鑰和私鑰配對(duì)后，才能打開(kāi)非對(duì)稱加密的網(wǎng)絡(luò)通信數(shù)據(jù)，其私鑰由網(wǎng)絡(luò)通信的管理者保管，不能公開(kāi)使用。非對(duì)稱加密方法在網(wǎng)絡(luò)通信中的應(yīng)用，解密時(shí)僅需要管理者主動(dòng)輸入密鑰的數(shù)據(jù)即可，操作方法非常簡(jiǎn)單，而且具有較高的安全水平，提高了加密解密的時(shí)間效率。
2.2網(wǎng)絡(luò)通信中的數(shù)據(jù)加密技術(shù)
2.2.1鏈路加密
網(wǎng)絡(luò)通信中的鏈路加密，實(shí)際是一種在線加密技術(shù)，按照網(wǎng)絡(luò)通信的鏈路分配，提供可行的加密方法。網(wǎng)絡(luò)通信的數(shù)據(jù)信息在傳輸前，已經(jīng)進(jìn)入了加密的狀態(tài)，鏈路節(jié)點(diǎn)先進(jìn)行解密，在下一鏈路環(huán)境中，重新進(jìn)入加密狀態(tài)，整個(gè)網(wǎng)絡(luò)通信鏈路傳輸?shù)倪^(guò)程中，都是按照先解密在加密的方式進(jìn)行，鏈路上的數(shù)據(jù)信息，均處于密文保護(hù)狀態(tài)，隱藏了數(shù)據(jù)信息的各項(xiàng)屬性，避免數(shù)據(jù)信息被攻擊竊取。
2.2.2節(jié)點(diǎn)加密
節(jié)點(diǎn)加密技術(shù)確保了網(wǎng)絡(luò)通信節(jié)點(diǎn)位置數(shù)據(jù)信息的安全性，通過(guò)節(jié)點(diǎn)處的數(shù)據(jù)信息，都不會(huì)是明文形式，均表現(xiàn)為密文，促使節(jié)點(diǎn)加密成為具有安全保護(hù)功能的模塊，安全的連接了網(wǎng)絡(luò)通信中的信息。加點(diǎn)加密技術(shù)在網(wǎng)絡(luò)通信中的應(yīng)用，依賴于密碼裝置，用于完成節(jié)點(diǎn)信息的加密、解密，但是此類應(yīng)用也存在一個(gè)明顯的缺陷，即：報(bào)頭、路由信息為明文方式，由此增加了節(jié)點(diǎn)加密的難度，很容易為攻擊者提供竊取條件，是節(jié)點(diǎn)加密技術(shù)應(yīng)用中需要重點(diǎn)考慮的問(wèn)題。
2.2.3端到端加密
網(wǎng)絡(luò)通信的端到端加密，是指出發(fā)點(diǎn)到接收點(diǎn)，整個(gè)過(guò)程不能出現(xiàn)明文狀態(tài)的數(shù)據(jù)信息。端到端加密的過(guò)程中，不會(huì)出現(xiàn)解密行為，數(shù)據(jù)信息進(jìn)入到接收點(diǎn)后，接收人借助密鑰加密信息，提高網(wǎng)絡(luò)通信的安全性，即使網(wǎng)絡(luò)通信的節(jié)點(diǎn)發(fā)生安全破壞，也不會(huì)造成數(shù)據(jù)信息的攻擊丟失，起到優(yōu)質(zhì)的加密作用。端到端加密時(shí)，應(yīng)該做好出發(fā)點(diǎn)、接收點(diǎn)位置的網(wǎng)絡(luò)通信加密，以便確保整個(gè)網(wǎng)絡(luò)通信過(guò)程的安全性。
3結(jié)束語(yǔ)
為避免MPU和HCU同時(shí)對(duì)雙口RAM的同一個(gè)內(nèi)存單元進(jìn)行訪問(wèn)，本設(shè)計(jì)沒(méi)有采用雙口RAM的中斷或者信號(hào)量等機(jī)制，而是采用一種基于角色的環(huán)形緩沖收發(fā)機(jī)制，將雙口RAM劃分為兩個(gè)獨(dú)立環(huán)形緩沖區(qū)：發(fā)送環(huán)形緩沖區(qū)和接收環(huán)形緩沖區(qū)。發(fā)送環(huán)形緩沖區(qū)負(fù)責(zé)將MPU數(shù)據(jù)傳遞給HCU，最終發(fā)送給外部設(shè)備；HCU從外部設(shè)備接收到數(shù)據(jù)，放到接收環(huán)形緩沖區(qū)，并傳遞給MPU。
1．1數(shù)據(jù)處理
三取二安全計(jì)算機(jī)邏輯運(yùn)算模塊的運(yùn)行周期為600ms，該模塊按照周期進(jìn)行數(shù)據(jù)接收、數(shù)據(jù)處理、數(shù)據(jù)輸出。在第n個(gè)周期，MPU上的控制邏輯運(yùn)算模塊從雙口RAM接收到數(shù)據(jù)后，放到邏輯接收緩沖區(qū)；從邏輯接收緩沖區(qū)取出n－1個(gè)周期的數(shù)據(jù)并進(jìn)行邏輯處理；將n－2個(gè)周期的邏輯處理結(jié)果，從邏輯發(fā)送緩沖區(qū)中取出，放到雙口RAM中。MPU上的控制邏輯運(yùn)算模塊對(duì)安全數(shù)據(jù)進(jìn)行邏輯處理的時(shí)間不超過(guò)300ms，如果超過(guò)，就會(huì)影響MPU接收或者發(fā)送數(shù)據(jù)。同樣，MPU上的控制邏輯運(yùn)算模塊接收、發(fā)送數(shù)據(jù)超過(guò)300ms，也會(huì)影響邏輯處理功能。在接收發(fā)送處理階段，300ms中的280ms被分為20個(gè)發(fā)送接收子周期，每一個(gè)子周期的時(shí)間為14ms。在HCU中，也是按照同樣的運(yùn)行節(jié)拍從雙口RAM中寫(xiě)入或讀出數(shù)據(jù)。MPU與HCU之間交互的數(shù)據(jù)，按照預(yù)先定義的雙口RAM交換數(shù)據(jù)幀進(jìn)行。數(shù)據(jù)幀定義略———編者注。
1．2數(shù)據(jù)接收
HCU通過(guò)網(wǎng)絡(luò)接口接收到數(shù)據(jù)后，對(duì)數(shù)據(jù)進(jìn)行預(yù)處理，按照交換數(shù)據(jù)幀進(jìn)行數(shù)據(jù)組包。根據(jù)當(dāng)前周期號(hào)設(shè)置“cycle”，同時(shí)確定該數(shù)據(jù)包需要被放到D、E、F三個(gè)區(qū)塊中寫(xiě)入?yún)^(qū)塊角色標(biāo)志“role”，將“flag”設(shè)置為1（即為輸入），并交換數(shù)據(jù)幀的其他字段，按照源網(wǎng)絡(luò)數(shù)據(jù)包中的信息進(jìn)行設(shè)置。HCU根據(jù)當(dāng)前周期號(hào)確定在接收環(huán)形緩沖區(qū)中的寫(xiě)入?yún)^(qū)塊后，將組包之后的交換數(shù)據(jù)幀放到寫(xiě)入?yún)^(qū)塊中。MPU根據(jù)當(dāng)前周期號(hào)確定在接收環(huán)形緩沖區(qū)中的讀出區(qū)塊后，從讀出區(qū)塊中獲取交換數(shù)據(jù)幀，然后對(duì)數(shù)據(jù)幀進(jìn)行解包，并通過(guò)“cycle”、“role”、“flag”、“safety”、“crc”等信息來(lái)驗(yàn)證數(shù)據(jù)幀的唯一性和正確性，正常的數(shù)據(jù)幀被放到邏輯接收緩沖區(qū)，異常的數(shù)據(jù)幀被丟棄。同時(shí)MPU根據(jù)當(dāng)前周期號(hào)，確定在接收環(huán)形緩沖區(qū)中的測(cè)試區(qū)塊，利用內(nèi)存檢測(cè)算法對(duì)測(cè)試區(qū)塊進(jìn)行雙口RAM內(nèi)存區(qū)塊檢測(cè)。
1．3數(shù)據(jù)發(fā)送
在當(dāng)前周期的600ms內(nèi)，MPU進(jìn)行邏輯運(yùn)算處理在300ms內(nèi)完成后，MPU從邏輯發(fā)送緩沖區(qū)中讀取上個(gè)周期的邏輯處理結(jié)果數(shù)據(jù)，并對(duì)結(jié)果數(shù)據(jù)進(jìn)行預(yù)處理，按照交換數(shù)據(jù)幀進(jìn)行數(shù)據(jù)組包。根據(jù)當(dāng)前周期號(hào)設(shè)置“cycle”，同時(shí)確定該數(shù)據(jù)包需要被放到A、B、C三個(gè)區(qū)塊中寫(xiě)入?yún)^(qū)塊角色標(biāo)志“role”，將“flag”設(shè)置為1（即為輸入），并交換數(shù)據(jù)幀的其他字段，按照源網(wǎng)絡(luò)數(shù)據(jù)包中的信息進(jìn)行設(shè)置。MPU根據(jù)當(dāng)前周期號(hào)，確定在發(fā)送環(huán)形緩沖區(qū)中的寫(xiě)入?yún)^(qū)塊后，將組包之后的交換數(shù)據(jù)幀放到寫(xiě)入?yún)^(qū)塊中。HCU根據(jù)當(dāng)前周期號(hào)，確定在接收環(huán)形緩沖區(qū)中的讀出區(qū)塊后，從讀出區(qū)塊中獲取交換數(shù)據(jù)幀，然后對(duì)數(shù)據(jù)幀進(jìn)行解包，并通過(guò)“cycle”、“role”、“flag”、“safety”、“crc”等信息來(lái)驗(yàn)證數(shù)據(jù)幀的唯一性和正確性，驗(yàn)證數(shù)據(jù)幀的正確性。異常的數(shù)據(jù)幀被丟棄，正常的數(shù)據(jù)幀按照網(wǎng)絡(luò)數(shù)據(jù)幀進(jìn)行組包，并通過(guò)網(wǎng)絡(luò)發(fā)送給軌旁設(shè)備或者車(chē)載控制器。同時(shí)HCU根據(jù)當(dāng)前周期號(hào)，確定在發(fā)送環(huán)形緩沖區(qū)中的測(cè)試區(qū)塊，利用內(nèi)存檢測(cè)算法對(duì)測(cè)試區(qū)塊進(jìn)行雙口RAM內(nèi)存區(qū)塊檢測(cè)。
1．4區(qū)塊角色輪換
雙口RAM的發(fā)送與接收環(huán)形緩沖區(qū)的3個(gè)區(qū)塊，在任意一個(gè)周期都只能處于讀出、寫(xiě)入、測(cè)試3種中的某一種角色，而且這3個(gè)角色進(jìn)行周期輪換，區(qū)塊角色輪換表略———編者注。MPU與HCU通過(guò)雙口RAM區(qū)塊角色進(jìn)行數(shù)據(jù)交互的步驟略———編者注。MPU與HCU通過(guò)相同的外部時(shí)鐘中斷來(lái)驅(qū)動(dòng)數(shù)據(jù)處理軟件模塊的運(yùn)行，MPU與HCU在對(duì)雙口RAM進(jìn)行訪問(wèn)時(shí)可以做到同步、流水線作業(yè)。在同一個(gè)處理周期內(nèi)，發(fā)送環(huán)形緩沖區(qū)或者接收環(huán)形緩沖區(qū)中任何一個(gè)區(qū)塊都有明確固定的角色，MPU板和HCU板不會(huì)同時(shí)訪問(wèn)操作相同區(qū)塊，只有一個(gè)板卡對(duì)特定區(qū)塊進(jìn)行訪問(wèn)，從而解決了雙口RAM的訪問(wèn)沖突問(wèn)題，不需要另外采取硬件仲裁、軟件仲裁或者信號(hào)量交互等手段。
1．5雙口RAM檢測(cè)
應(yīng)用在三取二安全計(jì)算機(jī)中雙口RAM可能存在一些功能性缺陷。無(wú)論門(mén)級(jí)電子元件的制造缺陷，還是板卡電路級(jí)的設(shè)計(jì)錯(cuò)誤，都可能導(dǎo)致雙口RAM的存儲(chǔ)功能性故障，從而降低其功能完整性和可靠性。雙口RAM存儲(chǔ)單元具有多種類型的故障略———編者注。實(shí)際項(xiàng)目應(yīng)用中，開(kāi)發(fā)人員需要關(guān)注雙口RAM存儲(chǔ)功能的完整性和可靠性，可以通過(guò)存儲(chǔ)器檢測(cè)算法來(lái)對(duì)其進(jìn)行檢測(cè)和診斷，能夠及時(shí)地發(fā)現(xiàn)和定位雙口RAM的存儲(chǔ)功能故障，并及時(shí)采取相應(yīng)的措施，避免因雙口RAM存儲(chǔ)單元的數(shù)據(jù)錯(cuò)誤導(dǎo)致的嚴(yán)重后果。本文采用硬件BIST架構(gòu)（HBIST），在硬件電路中設(shè)計(jì)專門(mén)的硬件邏輯部件來(lái)對(duì)內(nèi)存進(jìn)行測(cè)試，其圖形測(cè)試向量有專門(mén)的硬件電路模塊生成，自動(dòng)對(duì)內(nèi)存的各種功能故障進(jìn)行測(cè)試，硬件架構(gòu)內(nèi)建測(cè)試的內(nèi)存故障測(cè)試覆蓋率高，而且測(cè)試速度快，設(shè)計(jì)選取的圖形測(cè)試向量主要用于覆蓋高層次的內(nèi)存故障，如NPSF、CF、DRF。HBIST利用March－TB內(nèi)存測(cè)試算法對(duì)系統(tǒng)的內(nèi)存進(jìn)行測(cè)試，使用硬件HBIST電路來(lái)生成圖形測(cè)試向量，并由硬件HBIST電路來(lái)進(jìn)行測(cè)試，HBIST測(cè)試電路模型略———編者注。在硬件BIST處于非工作狀態(tài)時(shí)，會(huì)拉低BIST的時(shí)鐘信號(hào)，BIST電路進(jìn)入休眠狀態(tài)。當(dāng)系統(tǒng)在夜間進(jìn)入非繁忙狀態(tài)，會(huì)產(chǎn)生BIST＿M(jìn)ODE信號(hào)，來(lái)激活BIST電路的BIST模式控制器，并拉高時(shí)鐘信號(hào)，BIST模式控制器發(fā)出控制信號(hào)，會(huì)接管對(duì)整個(gè)RAM的訪問(wèn)控制，并對(duì)RAM開(kāi)始進(jìn)行測(cè)試。BIST模式控制器控制測(cè)試向量產(chǎn)生器、地址與數(shù)據(jù)生成邏輯工作，產(chǎn)生相應(yīng)的測(cè)試向量對(duì)RAM進(jìn)行測(cè)試。同時(shí)，并將測(cè)試結(jié)果在BIST結(jié)果比較器中進(jìn)行比較，如果發(fā)現(xiàn)異常，退出BIST＿M(jìn)ODE模式，通知MPU測(cè)試異常，MPU產(chǎn)生相應(yīng)的告警和錯(cuò)誤處理。HBIST在進(jìn)行內(nèi)存檢測(cè)時(shí)一共具有4種狀態(tài)：idle、test、error、wait。idle表示處于等待測(cè)試數(shù)據(jù)進(jìn)行測(cè)試的空閑狀態(tài)；test表示獲得測(cè)試向量對(duì)相應(yīng)內(nèi)存單元進(jìn)行測(cè)試；error表示檢測(cè)到內(nèi)存單元出錯(cuò)；wait表示處于休眠狀態(tài)，等待CPU模塊激活HBIST。HBIST狀態(tài)機(jī)的狀態(tài)轉(zhuǎn)移圖略———編者注。HBIST狀態(tài)機(jī)的VHDL程序略———編者注。在測(cè)試的過(guò)程中，通過(guò)植入內(nèi)存故障，并用邏輯分析儀獲取出錯(cuò)信號(hào)，硬件BIST模塊檢測(cè)內(nèi)存出錯(cuò)圖如圖3所示。圓圈里面的測(cè)試結(jié)果與期望結(jié)果不一致，內(nèi)存檢測(cè)出錯(cuò)。
1．6數(shù)據(jù)交互軟硬件設(shè)計(jì)
雙口RAM是雙端口SRAM芯片，本設(shè)計(jì)采用CY7C028V－15AXI，讀寫(xiě)速度最高為15ns，數(shù)據(jù)容量為64K×16位。雙口RAM連接HCU板的一端為MPC8247的LO－CALBUS總線，連接MPU板的一端為CPCI總線橋接芯片的LOCALBUS總線，HCU可以直接通過(guò)LOCALBUS總線訪問(wèn)雙口RAM，而MPU板通過(guò)PCI總線訪問(wèn)，其中還有控制信號(hào)，如片選、讀寫(xiě)、中斷、BUSY信號(hào)等。雙口RAM交互電路圖略———編者注。在MPU和HCU中，通過(guò)設(shè)計(jì)的軟件模塊，來(lái)完成雙口RAM的訪問(wèn)操作。雙口RAM的MPU上軟件交互關(guān)鍵代碼略———編者注。
2結(jié)語(yǔ)
現(xiàn)代經(jīng)濟(jì)正步入以世界統(tǒng)一市場(chǎng)為標(biāo)志的世界經(jīng)濟(jì)一體化軌道，企業(yè)的成敗，取決于信息獲取、識(shí)別、處理、轉(zhuǎn)換、傳遞的準(zhǔn)確性、效率與速度。因此，信息在企業(yè)經(jīng)營(yíng)管理中的重要作用也將愈來(lái)愈顯著。隨著我國(guó)改革開(kāi)放，確立市場(chǎng)經(jīng)濟(jì)體制，和加入WTO，企業(yè)要能在國(guó)際國(guó)內(nèi)激烈的市場(chǎng)競(jìng)爭(zhēng)中求得生存與此同時(shí)發(fā)展，一個(gè)重要的條件就是——必須要有一個(gè)健全的高效的信息系統(tǒng)，以滿足企業(yè)經(jīng)營(yíng)管理決策所需的各種內(nèi)外信息。因此，作為提供信息的企業(yè)統(tǒng)計(jì)必將在其中扮演重要角色，發(fā)揮重要作用。特別是對(duì)我們**系統(tǒng)來(lái)說(shuō)，隨著“大企業(yè)、大市場(chǎng)、大品牌”的形成，以行政區(qū)劃為單一的卷煙市場(chǎng)割據(jù)將很快被打破，搬掉門(mén)檻推倒墻是大勢(shì)所趨。再下一步就有可能是**專賣(mài)法的取消，所有這些都告訴我們，**行業(yè)也將馬上面臨著國(guó)際國(guó)內(nèi)激烈的市場(chǎng)競(jìng)爭(zhēng)。想在這種激烈的競(jìng)爭(zhēng)中生存發(fā)展，必須要有一支能夠?yàn)槠髽I(yè)的決策和管理者提供準(zhǔn)確數(shù)據(jù)的素質(zhì)過(guò)硬的統(tǒng)計(jì)隊(duì)伍。
近年來(lái)，我國(guó)統(tǒng)計(jì)工作取得了比較顯著的成績(jī)。從總體上來(lái)看，我國(guó)現(xiàn)有的統(tǒng)計(jì)數(shù)據(jù)，基本上還是能夠反映客觀實(shí)際的。但是，隨著社會(huì)主義市場(chǎng)經(jīng)濟(jì)的不斷發(fā)展，經(jīng)濟(jì)結(jié)構(gòu)復(fù)雜化，利益主體多元化，再加上體制轉(zhuǎn)化過(guò)程中經(jīng)濟(jì)秩序混亂，人為干擾增多，因而搞準(zhǔn)統(tǒng)計(jì)數(shù)據(jù)的難度也就日益增大，統(tǒng)計(jì)失實(shí)的潛在危險(xiǎn)性也就日漸嚴(yán)重，并將逐步暴露。對(duì)此，我們必須要有清醒的認(rèn)識(shí)，要始終不渝地把提高統(tǒng)計(jì)數(shù)據(jù)質(zhì)量問(wèn)題，擺到統(tǒng)計(jì)工作的首要位置，并采取綜合治理措施，切實(shí)抓緊抓好。下面就統(tǒng)計(jì)數(shù)據(jù)質(zhì)量問(wèn)題談?wù)勛约阂恍┐譁\的看法。
一、統(tǒng)計(jì)數(shù)據(jù)質(zhì)量控制的意義
企業(yè)統(tǒng)計(jì)的目的是為企業(yè)經(jīng)營(yíng)決策管理提供統(tǒng)計(jì)信息。在市場(chǎng)經(jīng)濟(jì)條件下，企業(yè)經(jīng)營(yíng)決策極具風(fēng)險(xiǎn)性，風(fēng)險(xiǎn)產(chǎn)生于不確定性并由不確定性程度決定風(fēng)險(xiǎn)的大小，而不確定性又與信息的準(zhǔn)確和及時(shí)程度直接相關(guān)，信息愈準(zhǔn)確及時(shí)，不確定性愈低，反之，亦然。所以，準(zhǔn)確性和及時(shí)性是對(duì)統(tǒng)計(jì)資料的兩項(xiàng)基本要求。其中，準(zhǔn)確性的要求是第一位的，是統(tǒng)計(jì)工作的生命。它確定著統(tǒng)計(jì)資料是否有效和價(jià)值的高低，是衡量統(tǒng)計(jì)數(shù)據(jù)質(zhì)量的根本標(biāo)志。準(zhǔn)確可靠的統(tǒng)計(jì)數(shù)據(jù)，便于決策和管理者正確地把握形勢(shì)，客觀地剖析問(wèn)題，從而作出科學(xué)的決策。反之，有水分的、失實(shí)的統(tǒng)計(jì)數(shù)據(jù)，相互矛盾的統(tǒng)計(jì)數(shù)據(jù)，給決策者以錯(cuò)誤的信號(hào)，將會(huì)誤導(dǎo)決策和調(diào)控，對(duì)企業(yè)的發(fā)展將會(huì)造成重大損失。因此，統(tǒng)計(jì)工作者必須以對(duì)本職工作高度負(fù)責(zé)的精神，以統(tǒng)計(jì)數(shù)據(jù)為對(duì)象，以消除統(tǒng)計(jì)數(shù)據(jù)的差錯(cuò)為目標(biāo)，千方百計(jì)搞準(zhǔn)統(tǒng)計(jì)數(shù)據(jù)，達(dá)到強(qiáng)化統(tǒng)計(jì)數(shù)據(jù)質(zhì)量控制的目的。
二、常見(jiàn)的統(tǒng)計(jì)數(shù)據(jù)質(zhì)量問(wèn)題及分析
（一）數(shù)據(jù)虛假
這是最常見(jiàn)的統(tǒng)計(jì)數(shù)據(jù)質(zhì)量問(wèn)題，也是危害最為嚴(yán)重的數(shù)據(jù)質(zhì)量問(wèn)題。這類統(tǒng)計(jì)數(shù)據(jù)完全是虛構(gòu)的杜撰的，毫無(wú)事實(shí)根據(jù)。造成統(tǒng)計(jì)數(shù)據(jù)虛假的因素多種多樣，比如，有意虛報(bào)，瞞報(bào)統(tǒng)計(jì)數(shù)據(jù)資料，指標(biāo)制定不嚴(yán)密，統(tǒng)計(jì)制度不完善，不配套等。
（二）拼湊的數(shù)據(jù)
這種數(shù)據(jù)是把不同地點(diǎn)，不同條件，不同性質(zhì)的數(shù)據(jù)在收集、加工、傳遞過(guò)程中，人為地拼湊成同一時(shí)間、地點(diǎn)、條件和性質(zhì)下的同一數(shù)據(jù)。這種東拼西湊的數(shù)據(jù)，雖然分別有事實(shí)根據(jù)，但是從整體上看數(shù)據(jù)是不符合事實(shí)的，其性質(zhì)與數(shù)據(jù)虛構(gòu)相同。
（三）指標(biāo)數(shù)值背離指標(biāo)原意
這是由于對(duì)指標(biāo)的理解不準(zhǔn)確，或者是因?yàn)橹笜?biāo)含義模糊，指標(biāo)計(jì)算的隨意性大等原因造成的數(shù)據(jù)質(zhì)量問(wèn)題，表現(xiàn)為收集整理的統(tǒng)計(jì)數(shù)據(jù)不是所要求的統(tǒng)計(jì)內(nèi)容，數(shù)據(jù)與指標(biāo)原意出現(xiàn)走樣，面目全非。
（四）數(shù)據(jù)的邏輯性錯(cuò)誤
這是指統(tǒng)計(jì)資料的排列不合邏輯，各個(gè)數(shù)據(jù)、項(xiàng)目之間相互矛盾。例如，企業(yè)卷煙庫(kù)存商品中主要的組成部分是省產(chǎn)煙、省外煙、國(guó)外煙，如果企業(yè)報(bào)送的統(tǒng)計(jì)資料中，卷煙庫(kù)存商品總金額顯著下降，而省產(chǎn)煙庫(kù)存金額大幅度上升，省外煙和國(guó)外煙庫(kù)存金額只是持平或只有小幅度的下降，這就存在矛盾，表明數(shù)據(jù)有邏輯性錯(cuò)誤。
（五）數(shù)據(jù)的非同一性
它是指同一個(gè)指標(biāo)在不同時(shí)期的統(tǒng)計(jì)范圍、口徑、內(nèi)容、方法、單位和價(jià)格上有差別而造成的數(shù)據(jù)的不可比性。例如，2003年的統(tǒng)計(jì)資料中不含稅價(jià)在30元以上的卷煙為一類卷煙，而在2004年的統(tǒng)計(jì)資料中，不含稅價(jià)50元以上的卷煙為一類卷煙，如果在此基礎(chǔ)上來(lái)比較兩年的一類卷煙的銷(xiāo)售量，而得出一類卷煙銷(xiāo)售量大幅度下降的結(jié)論顯然是不合理的。
（六）數(shù)據(jù)不完整
這里指調(diào)查單位出現(xiàn)遺漏，所列項(xiàng)目的資料沒(méi)有搜集齊全，不符合統(tǒng)計(jì)資料完整性的要求。數(shù)據(jù)不完整，就不可能反映研究對(duì)象的全貌和正確認(rèn)識(shí)現(xiàn)象總體特征，最終也就難以對(duì)現(xiàn)象變化的規(guī)律性做出明確的判斷，甚至?xí)贸鲥e(cuò)誤的結(jié)論。
（七）統(tǒng)計(jì)手段和統(tǒng)計(jì)分析落后
目前許多企業(yè)統(tǒng)計(jì)工作仍處于手工狀態(tài)，很原始！即使采用計(jì)算機(jī)也僅僅是減少工作量去做一些匯總、指標(biāo)計(jì)算，并沒(méi)真正引用先進(jìn)的計(jì)算機(jī)技術(shù)和網(wǎng)絡(luò)技術(shù)。所做的統(tǒng)計(jì)分析也局限于事后分析，即對(duì)統(tǒng)計(jì)數(shù)據(jù)進(jìn)行單純的講解說(shuō)明；不能利用網(wǎng)絡(luò)技術(shù)實(shí)行信息共享等方式進(jìn)行事前分析和預(yù)測(cè)。換句話說(shuō)，“統(tǒng)計(jì)預(yù)測(cè)”這一職能根本沒(méi)有發(fā)揮作用，缺乏對(duì)信息的收集、綜合和系統(tǒng)化。
此外，常見(jiàn)的統(tǒng)計(jì)數(shù)據(jù)問(wèn)題還有計(jì)算錯(cuò)誤、筆誤等。
可見(jiàn)，統(tǒng)計(jì)數(shù)據(jù)質(zhì)量問(wèn)題既可能是來(lái)自于設(shè)計(jì)階段，也可能是來(lái)自于統(tǒng)計(jì)資料的整理階段。
三、統(tǒng)計(jì)數(shù)據(jù)質(zhì)量控制方法
（一）、統(tǒng)計(jì)數(shù)據(jù)質(zhì)量控制的原則應(yīng)當(dāng)是全過(guò)程的、全員參加的、以預(yù)防為主的數(shù)據(jù)質(zhì)量控制。
首先，統(tǒng)計(jì)數(shù)據(jù)質(zhì)量控制要貫穿于統(tǒng)計(jì)工作的全過(guò)程。每進(jìn)行一步，都要對(duì)已完成的工作進(jìn)行檢查、對(duì)已發(fā)生的差錯(cuò)及時(shí)進(jìn)行糾正，做到層層把關(guān)，防止差錯(cuò)流入下一個(gè)工作環(huán)節(jié)，以保證統(tǒng)計(jì)數(shù)據(jù)的質(zhì)量。其次，參加統(tǒng)計(jì)數(shù)據(jù)質(zhì)量管理和控制的人員應(yīng)當(dāng)是全面的。全體統(tǒng)計(jì)工作者都要樹(shù)立數(shù)據(jù)質(zhì)量意識(shí)，各個(gè)主要的工作環(huán)節(jié)都要落實(shí)專人負(fù)責(zé)。統(tǒng)計(jì)數(shù)據(jù)質(zhì)量的好壞，是許多工作和許多統(tǒng)計(jì)工作環(huán)節(jié)質(zhì)量的綜合反映，牽涉到統(tǒng)計(jì)工作的所有部門(mén)和人員，因此，提高數(shù)據(jù)質(zhì)量需要依靠所有統(tǒng)計(jì)工作者的共同努力，決不是單純靠某一個(gè)部門(mén)或少數(shù)人所能搞得好、抓得了的。只有人人關(guān)心數(shù)據(jù)質(zhì)量，大家都對(duì)數(shù)據(jù)質(zhì)量高度負(fù)責(zé)，產(chǎn)生優(yōu)質(zhì)的統(tǒng)計(jì)數(shù)據(jù)才有堅(jiān)實(shí)的群眾基礎(chǔ)。因而，統(tǒng)計(jì)數(shù)據(jù)質(zhì)量控制要求把差錯(cuò)消滅在它的形成過(guò)程中，做到防檢結(jié)合，以防為主。這就要求有關(guān)人員在質(zhì)量控制中具有超前意識(shí)，拋棄那種出現(xiàn)了統(tǒng)計(jì)數(shù)據(jù)問(wèn)題才想辦法解決問(wèn)題的被動(dòng)的局面。
實(shí)行全員性的質(zhì)量控制，就要把統(tǒng)計(jì)數(shù)據(jù)質(zhì)量目標(biāo)及其關(guān)鍵交給廣大統(tǒng)計(jì)工作者，落實(shí)到每個(gè)工作崗位，使每個(gè)崗位都有明確的工作質(zhì)量標(biāo)準(zhǔn)，做到合理分工、職責(zé)明確，職責(zé)越明確，數(shù)據(jù)質(zhì)量控制就越有保證。
（二）、統(tǒng)計(jì)設(shè)計(jì)階段的質(zhì)量控制
統(tǒng)計(jì)設(shè)計(jì)是統(tǒng)計(jì)工作的首要環(huán)節(jié)，統(tǒng)計(jì)數(shù)據(jù)質(zhì)量的好壞，首先決定于這個(gè)過(guò)程，它是提高統(tǒng)計(jì)數(shù)據(jù)質(zhì)量的前提。如果設(shè)計(jì)過(guò)程的工作質(zhì)量不好，就會(huì)給統(tǒng)計(jì)數(shù)據(jù)質(zhì)量留下許多后遺癥。設(shè)計(jì)過(guò)程的質(zhì)量控制需要抓好以下幾項(xiàng)工作：
1、正確規(guī)定統(tǒng)計(jì)數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)。數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)是指根據(jù)不同的統(tǒng)計(jì)目的對(duì)統(tǒng)計(jì)數(shù)據(jù)精度所提出的要求。滿足統(tǒng)計(jì)目的精度的統(tǒng)計(jì)數(shù)據(jù)就是準(zhǔn)確的，高質(zhì)量的統(tǒng)計(jì)數(shù)據(jù)。首先要作充分的調(diào)查，系統(tǒng)地收集市場(chǎng)和用戶對(duì)統(tǒng)計(jì)數(shù)據(jù)的反映和實(shí)際使用效果的情況；其次要分析研究過(guò)去統(tǒng)計(jì)數(shù)據(jù)的主要質(zhì)量問(wèn)題，找準(zhǔn)統(tǒng)計(jì)數(shù)據(jù)質(zhì)量控制的主攻方向；最后要進(jìn)行反復(fù)論證，考慮到統(tǒng)計(jì)工作中實(shí)際能夠達(dá)到的水平。
2、合理設(shè)計(jì)統(tǒng)計(jì)指標(biāo)體系及其計(jì)算方法。
統(tǒng)計(jì)指標(biāo)設(shè)計(jì)得是否合理，也是影響統(tǒng)計(jì)數(shù)據(jù)質(zhì)量的因素之一。采用統(tǒng)計(jì)報(bào)表搜集資料，首先要實(shí)行標(biāo)準(zhǔn)化管理，制定的指標(biāo)要符合統(tǒng)計(jì)制度的規(guī)定，范圍要全，分組要準(zhǔn)，指標(biāo)涵義的解釋和計(jì)算方法要精確；其次要對(duì)統(tǒng)計(jì)報(bào)表的設(shè)計(jì)、頒發(fā)、填制、匯總的全過(guò)程實(shí)行全面質(zhì)量管理。
（三）、資料整理鑒別階段的質(zhì)量控制
統(tǒng)計(jì)資料整理鑒別階段出現(xiàn)的差錯(cuò)是統(tǒng)計(jì)數(shù)據(jù)質(zhì)量問(wèn)題的重要方面。如果資料不準(zhǔn)確，就會(huì)影響結(jié)論的正確。因此，要特別注意審查資料的可靠性和適用性，要弄清楚統(tǒng)計(jì)指標(biāo)的口徑范圍、計(jì)算方法和時(shí)期時(shí)點(diǎn)。對(duì)于口徑不一致或不完整的資料，需要進(jìn)行調(diào)整、補(bǔ)充；對(duì)于相互比較的資料，必須要注意有無(wú)可比性；一旦發(fā)現(xiàn)數(shù)據(jù)有嚴(yán)重的質(zhì)量問(wèn)題，應(yīng)進(jìn)行核實(shí)，避免有質(zhì)量問(wèn)題的資料進(jìn)入?yún)R總處理階段?？傊瑢?duì)搜集到的資料，經(jīng)過(guò)鑒別推敲、核實(shí)審定、使之準(zhǔn)確無(wú)誤，才能使統(tǒng)計(jì)數(shù)據(jù)的質(zhì)量得到保證。
（四）、人為錯(cuò)誤的質(zhì)量控制
1、盡可能采用計(jì)算機(jī)處理統(tǒng)計(jì)資料，同時(shí)提高統(tǒng)計(jì)分析水平。
計(jì)算機(jī)作為當(dāng)今社會(huì)不可缺少的高科技產(chǎn)物已滲透到我們生活、工作中的各個(gè)環(huán)節(jié)。運(yùn)用計(jì)算機(jī)整理、匯總統(tǒng)計(jì)資料，速度快、效果好，其優(yōu)越性是手工整理無(wú)可比擬的?，F(xiàn)在國(guó)內(nèi)大部分著名企業(yè)基本上實(shí)行網(wǎng)絡(luò)化、全球化，利用網(wǎng)絡(luò)資源了解世界先進(jìn)行業(yè)信息，采用科學(xué)先進(jìn)的統(tǒng)計(jì)分析方法和手段，進(jìn)行橫向、縱向?qū)Ρ?，找差距挖潛力，努力趕超世界先進(jìn)企業(yè)。要能夠?qū)懗鲇幸欢ㄉ疃鹊慕y(tǒng)計(jì)分析預(yù)測(cè)報(bào)告，系統(tǒng)、全面、科學(xué)地去挖掘利用網(wǎng)絡(luò)資源和從市場(chǎng)取得的第一手資料，完善整個(gè)分析、預(yù)測(cè)手段方法和過(guò)程。但是，也應(yīng)重視計(jì)算機(jī)處理數(shù)據(jù)的質(zhì)量問(wèn)題，提高計(jì)算機(jī)數(shù)據(jù)處理的關(guān)鍵在于提高錄入數(shù)據(jù)的可靠性。
2、統(tǒng)計(jì)工作者本身應(yīng)提高自身素質(zhì)。
統(tǒng)計(jì)人員沒(méi)有深厚的專業(yè)知識(shí)和豐富的實(shí)際工作經(jīng)驗(yàn)，沒(méi)有跟上時(shí)代及時(shí)進(jìn)行知識(shí)更新，不善于統(tǒng)計(jì)調(diào)查獲取第一手資料，寫(xiě)不出有一定深度關(guān)于本企業(yè)某一方面對(duì)決策層有參考價(jià)值的統(tǒng)計(jì)分析報(bào)告。因此，對(duì)統(tǒng)計(jì)人員應(yīng)該加強(qiáng)培訓(xùn)工作，企業(yè)內(nèi)部應(yīng)建立配套的培訓(xùn)機(jī)制，對(duì)每一層次統(tǒng)計(jì)崗位實(shí)施針對(duì)性的培訓(xùn)，必要時(shí)到企業(yè)外請(qǐng)有關(guān)專家學(xué)者授課，或到相關(guān)先進(jìn)單位進(jìn)行考察學(xué)習(xí)，做到取長(zhǎng)補(bǔ)短。統(tǒng)計(jì)工作者本身也應(yīng)該努力學(xué)習(xí)統(tǒng)計(jì)知識(shí)，鉆研業(yè)務(wù)，不斷提高統(tǒng)計(jì)業(yè)務(wù)素質(zhì)和水平，杜絕因業(yè)務(wù)不熟悉而造成的數(shù)據(jù)質(zhì)量問(wèn)題。
3、加強(qiáng)對(duì)統(tǒng)計(jì)人員的職業(yè)道德培訓(xùn)。
目前，上級(jí)部門(mén)下達(dá)計(jì)劃和各類政績(jī)考核對(duì)統(tǒng)計(jì)數(shù)據(jù)干擾不可低估。有些地方，以是否完成計(jì)劃和各類數(shù)據(jù)的高低作為考核地方政績(jī)的依據(jù)，導(dǎo)致很多下級(jí)部門(mén)所報(bào)的統(tǒng)計(jì)數(shù)據(jù)高于計(jì)劃數(shù)或持平，這并不是計(jì)劃部門(mén)的計(jì)劃多么精確合理，而是說(shuō)明某些統(tǒng)計(jì)對(duì)象或統(tǒng)計(jì)部門(mén)受某種利益的驅(qū)動(dòng)而使統(tǒng)計(jì)數(shù)據(jù)的質(zhì)量得不到保障。當(dāng)然，數(shù)據(jù)不真實(shí)、不準(zhǔn)確的原因是多方面的，其中統(tǒng)計(jì)人員的思想道德對(duì)統(tǒng)計(jì)數(shù)據(jù)的影響是很大的。這就要求我們加強(qiáng)對(duì)統(tǒng)計(jì)人員的思想品德和職業(yè)道德教育，要求每一個(gè)統(tǒng)計(jì)工作者必須堅(jiān)持實(shí)事求是的工作作風(fēng)，認(rèn)真對(duì)待每一個(gè)統(tǒng)計(jì)數(shù)據(jù)，如實(shí)地反映情況。
4、加大統(tǒng)計(jì)執(zhí)法力度，保證源頭數(shù)據(jù)的準(zhǔn)確性。
關(guān)鍵詞：dbms復(fù)制聯(lián)邦數(shù)據(jù)庫(kù)
1.引言
隨著經(jīng)濟(jì)的發(fā)展，企業(yè)的規(guī)模越來(lái)越大，其積累的信息也越來(lái)越多。存在著各部門(mén)所處理的信息多數(shù)只對(duì)本部門(mén)有效，僅有少數(shù)信息需給其它某些部門(mén)共享的問(wèn)題。這種信息的分布性和獨(dú)立性要求對(duì)所處理的數(shù)據(jù)進(jìn)行分類，使各部門(mén)既能獨(dú)立地處理本部門(mén)大多數(shù)數(shù)據(jù)，也使部門(mén)間能協(xié)調(diào)處理跨部門(mén)的事務(wù)。在這種情況下，對(duì)整個(gè)企業(yè)建立一個(gè)完全的緊密耦合的分布式數(shù)據(jù)庫(kù)是很困難的，也是沒(méi)必要的，特別是大型企業(yè)，這樣的數(shù)據(jù)庫(kù)的效率往往是很低的。
為解決這個(gè)問(wèn)題，我們采用以下策略：每個(gè)部門(mén)使用一套緊密耦合的數(shù)據(jù)庫(kù)系統(tǒng)，而在存在跨部門(mén)事務(wù)處理的數(shù)據(jù)庫(kù)系統(tǒng)間用一個(gè)協(xié)調(diào)器聯(lián)起來(lái)。這樣就組成了一個(gè)橫跨整個(gè)企業(yè)，各部門(mén)高度自治的聯(lián)邦數(shù)據(jù)庫(kù)系統(tǒng)。
dm2是由華中理工大學(xué)數(shù)據(jù)庫(kù)多媒體技術(shù)研究所研制的數(shù)據(jù)庫(kù)管理系統(tǒng)。它采用客戶/服務(wù)器模型，客戶機(jī)與服務(wù)器，服務(wù)器與服務(wù)器均通過(guò)網(wǎng)絡(luò)互連，通過(guò)消息相互通訊，組成一個(gè)緊密耦合的分布式數(shù)據(jù)庫(kù)系統(tǒng)。它的工作流程如下：客戶機(jī)登錄到一臺(tái)服務(wù)器上，這臺(tái)服務(wù)器便成為它的服務(wù)器；它接收來(lái)自客戶機(jī)的消息，然后根據(jù)全局?jǐn)?shù)據(jù)字典決定是自己獨(dú)立完成該操作，還是與其它服務(wù)器協(xié)作處理這條消息，處理完成之后，再由服務(wù)器將處理結(jié)果返回給客戶機(jī)。
而數(shù)據(jù)字典，作為記錄數(shù)據(jù)庫(kù)所有元數(shù)據(jù)的系統(tǒng)表，它向以上過(guò)程中提供各類有用的信息，引導(dǎo)它們向正確的方向運(yùn)行，起著“指南針”的作用。它分為局部數(shù)據(jù)字典和全局?jǐn)?shù)據(jù)字典。其中，局部數(shù)據(jù)字典用于記錄一個(gè)服務(wù)器站點(diǎn)中數(shù)據(jù)庫(kù)的控制信息，如表的模式，視圖的模式及各個(gè)數(shù)據(jù)區(qū)的的文件名等信息。全局?jǐn)?shù)據(jù)字典用于記錄分布式數(shù)據(jù)庫(kù)系統(tǒng)中各個(gè)服務(wù)器站點(diǎn)上有關(guān)全局?jǐn)?shù)據(jù)的控制信息，如服務(wù)器站點(diǎn)信息，各服務(wù)器站點(diǎn)的全局表名及表內(nèi)碼記錄，各服務(wù)器站點(diǎn)上的全局?jǐn)?shù)據(jù)視圖名及視圖內(nèi)碼記錄，用戶名及口令記錄，用戶權(quán)限記錄等信息。各個(gè)局部數(shù)據(jù)字典可以各不相同，但為了保證在各個(gè)服務(wù)器上所看到的全局?jǐn)?shù)據(jù)庫(kù)是一致的，因此，全局?jǐn)?shù)據(jù)字典必須一致。我們所關(guān)心的是全局?jǐn)?shù)據(jù)字典中的基表控制塊tv_ctrl_block，它的內(nèi)容主要包括：全局基表總數(shù)，每個(gè)全局基表名和其對(duì)應(yīng)的表內(nèi)碼，該基表所在的服務(wù)器站點(diǎn)的編號(hào)等信息。它的功能是將各個(gè)服務(wù)器站點(diǎn)號(hào)與存儲(chǔ)在其上的表名及表內(nèi)碼聯(lián)系起來(lái)。這樣，服務(wù)器從客戶消息中找到被處理的表名，然后通過(guò)查詢基表控制塊tv_ctrl_block,就能知道該表存在哪個(gè)服務(wù)器上，以便將相關(guān)消息發(fā)給該服務(wù)器。
由于dm2上各個(gè)服務(wù)器站點(diǎn)的全局字典完全相同，任何全局表的信息都會(huì)記入全局字典。若用它來(lái)構(gòu)建一個(gè)企業(yè)的數(shù)據(jù)庫(kù)系統(tǒng)，則大量只對(duì)企業(yè)某部門(mén)有用的信息將會(huì)充斥在各部門(mén)所有服務(wù)器的全局字典中，增加了冗余。而且，當(dāng)對(duì)全局表進(jìn)行ddl操作時(shí)，為了確保全局字典的一致性，須對(duì)所有服務(wù)器的全局字典進(jìn)行加鎖。dm2對(duì)全局字典的封鎖方式是采用令牌環(huán)方式，即令牌繞虛環(huán)（非實(shí)環(huán)）傳輸，某個(gè)服務(wù)器想對(duì)全局字典進(jìn)行操作，必須等令牌到達(dá)該服務(wù)器才可以執(zhí)行。每個(gè)部門(mén)建立的全局表絕大多數(shù)只對(duì)本部門(mén)有用，當(dāng)對(duì)這些表進(jìn)行ddl操作時(shí)，卻要對(duì)所有服務(wù)器的全局字典進(jìn)行封鎖，通過(guò)令牌來(lái)實(shí)現(xiàn)對(duì)全局字典的互斥訪問(wèn)。假如，兩個(gè)部門(mén)都要分別對(duì)本部門(mén)的內(nèi)部表進(jìn)行ddl操作，這應(yīng)該是可以并行處理的操作，現(xiàn)在卻只能串行執(zhí)行。而且，當(dāng)服務(wù)器數(shù)目龐大時(shí)，每個(gè)服務(wù)器等待令牌的時(shí)間將會(huì)很長(zhǎng)。這嚴(yán)重?fù)p害了數(shù)據(jù)庫(kù)的效率。
為彌補(bǔ)以上不足，在dm2的改進(jìn)版本dm3中增加了協(xié)調(diào)器，用以聯(lián)接各個(gè)獨(dú)立的dm3數(shù)據(jù)庫(kù)子系統(tǒng)，并協(xié)調(diào)各子系統(tǒng)間的各種關(guān)系，使各子系統(tǒng)既能高度自治地工作，又能進(jìn)行有效的信息共享。
2.體系結(jié)構(gòu)
本系統(tǒng)可看作多個(gè)數(shù)據(jù)庫(kù)子系統(tǒng)被協(xié)調(diào)器聯(lián)起來(lái)的，高度自治的一個(gè)聯(lián)邦數(shù)據(jù)庫(kù)系統(tǒng)。其中，每個(gè)子系統(tǒng)獨(dú)立處理本系統(tǒng)內(nèi)部的事務(wù)，而子系統(tǒng)間的信息共享由復(fù)制技術(shù)提供，副本間的一致性由協(xié)調(diào)器協(xié)調(diào)處理，處理所需的信息在初始化時(shí)寫(xiě)入?yún)f(xié)調(diào)器的組間數(shù)據(jù)字典中。當(dāng)對(duì)某子系統(tǒng)中的一份數(shù)據(jù)副本進(jìn)行修改時(shí)，該子系統(tǒng)會(huì)將修改通知協(xié)調(diào)器，由協(xié)調(diào)器對(duì)該數(shù)據(jù)的其它副本進(jìn)行修改，從而保證了所有副本的一致性。
由以上可知，子系統(tǒng)彼此并不直接接觸，而是各自都與協(xié)調(diào)器直接相聯(lián)，由協(xié)調(diào)器統(tǒng)一管理子系統(tǒng)間的通信。這樣，當(dāng)子系統(tǒng)對(duì)副本進(jìn)行修改時(shí)，不必關(guān)心相應(yīng)的子系統(tǒng)處于何種狀態(tài)，也不必等待回應(yīng)消息，以及異常處理，所有這些都由協(xié)調(diào)器進(jìn)行管理。因此，既提高了系統(tǒng)運(yùn)行的效率，也保證了子系統(tǒng)的獨(dú)立性。其體系結(jié)構(gòu)如下圖所示。
協(xié)調(diào)器主要有三大功能，首先，它對(duì)協(xié)調(diào)器和服務(wù)器進(jìn)行初始化，并將有關(guān)信息存入組間字典；其次，它管理不同子系統(tǒng)間的通信，維護(hù)副本的一致性；最后，它在子系統(tǒng)出現(xiàn)崩潰時(shí)，進(jìn)行異常管理及恢復(fù)工作。
dm3多數(shù)據(jù)庫(kù)系統(tǒng)體系結(jié)構(gòu)
3.主要策略
多個(gè)dm3系統(tǒng)間的信息共享是通過(guò)副本實(shí)現(xiàn)的，副本的一致性是由協(xié)調(diào)器來(lái)維持的，是一種弱一致性。通常，多數(shù)據(jù)庫(kù)系統(tǒng)間的一致性是通過(guò)協(xié)調(diào)器周期性地訪問(wèn)服務(wù)器的日志來(lái)完成的。由于副本的更新帶有隨機(jī)性，因此，若采用這種方法，可能數(shù)據(jù)被修改多次，但其相對(duì)應(yīng)的副本仍未被修改，這樣就損害了數(shù)據(jù)的一致性；也可能數(shù)據(jù)并未被修改，但協(xié)調(diào)器已多次訪問(wèn)了服務(wù)器的日志了，這樣就降低了系統(tǒng)的效率。
所以，本系統(tǒng)采用的方法是當(dāng)數(shù)據(jù)被修改時(shí)，由服務(wù)器通知協(xié)調(diào)器有關(guān)信息，再由協(xié)調(diào)器通知相關(guān)系統(tǒng)，修改相關(guān)數(shù)據(jù)。這樣，數(shù)據(jù)的修改及時(shí)（仍然是弱一致性），而協(xié)調(diào)器也不會(huì)在數(shù)據(jù)未被修改的情況下訪問(wèn)服務(wù)器，提高了準(zhǔn)確性。
為了使協(xié)調(diào)器正常工作，我們對(duì)底層數(shù)據(jù)庫(kù)管理系統(tǒng)dm2進(jìn)行了修改。在基表控制塊tv_ctrl_block中增加一項(xiàng)isreplication。建表時(shí)，該項(xiàng)初始化為false；當(dāng)為該表建立一個(gè)副本時(shí)，該項(xiàng)賦值為true。具體算法如下。
3.1初始化算法。
協(xié)調(diào)器：
從用戶或應(yīng)用程序接收待連接的兩個(gè)系統(tǒng)中的服務(wù)器名，需復(fù)制的表名；
分別登錄到兩個(gè)系統(tǒng)的服務(wù)器上；
向存有待復(fù)制表的服務(wù)器發(fā)預(yù)復(fù)制消息；
等待服務(wù)器消息；
若失敗，發(fā)一條失敗的消息給服務(wù)器和用戶或應(yīng)用程序，轉(zhuǎn)11）；
若成功，從消息中取出待復(fù)制表的有關(guān)信息，根據(jù)這些信息，發(fā)一條建表消息給另一個(gè)系統(tǒng)的服務(wù)器；
等待服務(wù)器消息；
若失敗，發(fā)一條失敗的消息給服務(wù)器和用戶或應(yīng)用程序，轉(zhuǎn)11）；
若成功，調(diào)數(shù)據(jù)轉(zhuǎn)移程序，進(jìn)行數(shù)據(jù)復(fù)制；
將有關(guān)信息寫(xiě)入組間字典。
退出。
服務(wù)器：
當(dāng)服務(wù)器收到預(yù)復(fù)制消息后，將基表控制塊tv_ctrl_block中的isreplication賦為true。同時(shí)，取出待復(fù)制表的有關(guān)信息，組成應(yīng)答消息發(fā)給協(xié)調(diào)器。
當(dāng)服務(wù)器收到失敗的消息后，將基表控制塊tv_ctrl_block中的isreplication賦為false。
3.2維護(hù)算法。
協(xié)調(diào)器：
從組間字典讀出相關(guān)信息，根據(jù)這些信息，登錄到相應(yīng)系統(tǒng)上；
等待消息；
從某系統(tǒng)的服務(wù)器上收到一條修改消息后，通過(guò)查找組間字典，確定該消息的目的地，然后將它轉(zhuǎn)發(fā)過(guò)去；
若失敗，定時(shí)重發(fā)；
轉(zhuǎn)2）；
服務(wù)器：
1）等待消息；
2）當(dāng)收到某客戶或應(yīng)用程序的消息后，檢查它是否是修改數(shù)據(jù)的操作（如delete，update或insert等）；
若不是，轉(zhuǎn)7）；
若是，檢查基表控制塊tv_ctrl_block中的isreplication是否為true；
若不是，轉(zhuǎn)7）；
若是，向協(xié)調(diào)器發(fā)修改消息；
繼續(xù)執(zhí)行服務(wù)器程序的其它部分。
3.3恢復(fù)算法。
若協(xié)調(diào)器所聯(lián)接的系統(tǒng)中有一個(gè)跨掉了，則對(duì)副本的修改無(wú)法及時(shí)地反映到跨掉的系統(tǒng)中來(lái)。這時(shí)，需要恢復(fù)算法來(lái)進(jìn)行處理。
協(xié)調(diào)器：
當(dāng)協(xié)調(diào)器發(fā)現(xiàn)有一個(gè)系統(tǒng)已經(jīng)崩潰后，采取以下步驟。
將與該系統(tǒng)相關(guān)的變量open賦值為false；
打開(kāi)記時(shí)器；
等待消息；
若收到的消息是其它系統(tǒng)發(fā)出的修改崩潰了的系統(tǒng)上的副本的命令，則依次將這些消息存儲(chǔ)起來(lái)，轉(zhuǎn)3）；
若收到的消息是記時(shí)器發(fā)出的時(shí)間到的消息，則向崩潰的系統(tǒng)發(fā)登錄命令；
若登錄成功，將open的值改為true；
將存儲(chǔ)的消息依次發(fā)送過(guò)去，轉(zhuǎn)9）；
若登錄失敗，轉(zhuǎn)3）；
退出。
4.結(jié)論
我們?cè)谌齻€(gè)dm3數(shù)據(jù)庫(kù)系統(tǒng)上，用兩個(gè)協(xié)調(diào)器進(jìn)行聯(lián)接。結(jié)果，運(yùn)行情況良好，各副本最終都能保證一致，且各副本間存在差異的時(shí)間間隔很短。另外，在出現(xiàn)異常的情況下，協(xié)調(diào)器也能正常工作。
主要參考文獻(xiàn)
1.周龍?bào)J等，分布式數(shù)據(jù)庫(kù)管理系統(tǒng)實(shí)現(xiàn)技術(shù)，科學(xué)出版社，1998。
管理會(huì)計(jì)信息系統(tǒng)與會(huì)計(jì)核算系統(tǒng)有著很大不同。會(huì)計(jì)核算系統(tǒng)按照實(shí)際操作中對(duì)企業(yè)會(huì)計(jì)核算流程的要求安排設(shè)計(jì)，操作固定、內(nèi)容全面。只需要按照經(jīng)濟(jì)業(yè)務(wù)內(nèi)容和會(huì)計(jì)相關(guān)法律要求操作即可。而管理會(huì)計(jì)信息系統(tǒng)更為復(fù)雜。他沒(méi)有一成不變的決策處理程序，相反在決策過(guò)程中需要運(yùn)用大量的技術(shù)分析方法，對(duì)比多項(xiàng)數(shù)據(jù)信息才能得到所需的結(jié)果。系統(tǒng)龐大、操作復(fù)雜，一但結(jié)果失誤有可能對(duì)企業(yè)的發(fā)展帶來(lái)毀滅性打擊。因而該系統(tǒng)的建立對(duì)數(shù)據(jù)處理能力有著極高的要求。大數(shù)據(jù)時(shí)代的到來(lái)，它所提供的數(shù)據(jù)量、數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)處理方式正好貼合了管理會(huì)計(jì)信息系統(tǒng)的需要。它將企業(yè)決策中需要的財(cái)務(wù)因素與非財(cái)務(wù)因素結(jié)合起來(lái)，為企業(yè)管理提供可靠的數(shù)據(jù)支撐。
二、管理會(huì)計(jì)信息系統(tǒng)在企業(yè)中的作用
管理會(huì)計(jì)信息系統(tǒng)是會(huì)計(jì)信息系統(tǒng)的一個(gè)組成部分。長(zhǎng)久以來(lái)企業(yè)在會(huì)計(jì)信息化的道路上一味的重視會(huì)計(jì)核算的信息化，忽視了管理會(huì)計(jì)的信息化，使得管理會(huì)計(jì)的各項(xiàng)職能沒(méi)有在企業(yè)發(fā)揮出來(lái)。隨著企業(yè)規(guī)模發(fā)展壯大，經(jīng)濟(jì)環(huán)境紛繁復(fù)雜，管理會(huì)計(jì)越來(lái)越受到高層管理人員的重視。在企業(yè)中使用管理會(huì)計(jì)相關(guān)分析方法，建立管理會(huì)計(jì)的信息化系統(tǒng)可以為企業(yè)價(jià)值提升起到事半功倍的效果。1.為企業(yè)發(fā)展提供全面數(shù)據(jù)信息當(dāng)前經(jīng)濟(jì)形勢(shì)風(fēng)云變幻，紛繁復(fù)雜，稍有不慎就可能對(duì)企業(yè)發(fā)展帶來(lái)巨大打擊。及時(shí)、準(zhǔn)確的信息對(duì)企業(yè)決策至關(guān)重要，而建立管理會(huì)計(jì)信息系統(tǒng)可以對(duì)企業(yè)提供有效幫助。管理會(huì)計(jì)信息系統(tǒng)是以海量數(shù)據(jù)為基礎(chǔ)，運(yùn)用分析技術(shù)優(yōu)勢(shì)，結(jié)合管理需要，經(jīng)營(yíng)業(yè)務(wù)和會(huì)計(jì)要求，靈活運(yùn)用管理會(huì)計(jì)的工具方法，為企業(yè)經(jīng)營(yíng)的各個(gè)方面提供服務(wù)。通過(guò)該系統(tǒng)的建立，搜集經(jīng)營(yíng)過(guò)程中的結(jié)構(gòu)性數(shù)據(jù)和非結(jié)構(gòu)性數(shù)據(jù)，利用專業(yè)分析技術(shù)，深度挖掘數(shù)據(jù)內(nèi)含的信息，向決策者提供使用。2.對(duì)生產(chǎn)各環(huán)節(jié)進(jìn)行精細(xì)化管理該系統(tǒng)的建立，可以通過(guò)存貨系統(tǒng)、成本計(jì)算系統(tǒng)、質(zhì)量管理系統(tǒng)、價(jià)值鏈分析系統(tǒng)連接企業(yè)供應(yīng)、生產(chǎn)、銷(xiāo)售的各環(huán)節(jié)。其核心流程涉及成本收入要素處理、成本中心分析與處理、作業(yè)類型計(jì)劃與處理、內(nèi)部訂單處理、銷(xiāo)售與利潤(rùn)計(jì)劃、成本核算與結(jié)算、成本與作業(yè)分配、一般管理費(fèi)用核算、獲利性分析、全面預(yù)算與績(jī)效考核等方面。主要的業(yè)務(wù)對(duì)象包括成本要素、作業(yè)類型、收入要素、內(nèi)部定單、控制文檔、成本對(duì)象、成本核算估計(jì)、獲利性分析維度、業(yè)務(wù)計(jì)劃與預(yù)算表以及績(jī)效考核等。通過(guò)對(duì)各環(huán)節(jié)的嚴(yán)格把控，降低庫(kù)存、減少成本，提高利潤(rùn)。3.促進(jìn)企業(yè)完成戰(zhàn)略實(shí)施目標(biāo)管理會(huì)計(jì)信息系統(tǒng)中績(jī)效評(píng)價(jià)的部分針對(duì)企業(yè)員工的完成水平進(jìn)行評(píng)價(jià)，是該系統(tǒng)的重要組成部分。平衡積分卡績(jī)效評(píng)價(jià)體系是最近幾年流行在國(guó)內(nèi)外的企業(yè)績(jī)效評(píng)價(jià)體系。它分四個(gè)方面進(jìn)行：企業(yè)財(cái)務(wù)業(yè)績(jī)、客戶關(guān)系、內(nèi)部業(yè)務(wù)流程以及學(xué)習(xí)和成長(zhǎng)，對(duì)企業(yè)進(jìn)行評(píng)價(jià)。在系統(tǒng)中將企業(yè)的戰(zhàn)略實(shí)施目標(biāo)按照這四個(gè)部分細(xì)化成不同的財(cái)務(wù)或者非財(cái)務(wù)指標(biāo)，對(duì)照不同的部門(mén)逐級(jí)細(xì)化，進(jìn)行考核。該績(jī)效評(píng)價(jià)系統(tǒng)將企業(yè)戰(zhàn)略與員工考核掛鉤，既可以推動(dòng)戰(zhàn)略目標(biāo)的完成又可以激勵(lì)員工成長(zhǎng)。
三、在企業(yè)中建立管理信息系統(tǒng)的途徑
傳統(tǒng)的海洋數(shù)據(jù)服務(wù)一般是專項(xiàng)專建、專人專用，針對(duì)人群比較單一、數(shù)據(jù)類型比較簡(jiǎn)單，而且在項(xiàng)目結(jié)束后通常建設(shè)的數(shù)據(jù)庫(kù)和應(yīng)用系統(tǒng)由于沒(méi)有后期的經(jīng)費(fèi)支撐而停用。本研究提出的海洋環(huán)境數(shù)據(jù)在線服務(wù)系統(tǒng)（以下簡(jiǎn)稱系統(tǒng)），涵蓋了多專項(xiàng)、多學(xué)科的數(shù)據(jù)，在原有數(shù)據(jù)庫(kù)、應(yīng)用系統(tǒng)、專網(wǎng)基礎(chǔ)上進(jìn)行系統(tǒng)集成、數(shù)據(jù)庫(kù)擴(kuò)建，為海洋局屬各單位提供共享服務(wù)。系統(tǒng)是運(yùn)用面向服務(wù)架構(gòu)的設(shè)計(jì)思想搭建應(yīng)用系統(tǒng)。采用并行數(shù)據(jù)庫(kù)技術(shù)實(shí)現(xiàn)大數(shù)據(jù)量的存儲(chǔ)、加載、更新、查詢等操作，利用ETL調(diào)度工具實(shí)現(xiàn)源數(shù)據(jù)庫(kù)到并行數(shù)據(jù)庫(kù)的數(shù)據(jù)抽取、轉(zhuǎn)換和轉(zhuǎn)載，減少重新建庫(kù)的工作量。采用虛擬化技術(shù)整合存儲(chǔ)、服務(wù)器、網(wǎng)絡(luò)資源，建設(shè)數(shù)據(jù)中心集群，提高資源利用率，采用域控管理機(jī)制實(shí)現(xiàn)數(shù)據(jù)安全管理，權(quán)限管理。采用VPN認(rèn)證管理機(jī)制，保障系統(tǒng)安全正常運(yùn)轉(zhuǎn)。
2系統(tǒng)設(shè)計(jì)
系統(tǒng)通過(guò)面向服務(wù)的總體架構(gòu)，以數(shù)據(jù)的匯集、處理、應(yīng)用為基礎(chǔ)主線，采用高速并行技術(shù)，結(jié)合虛擬化技術(shù)等先進(jìn)IT技術(shù)，設(shè)計(jì)系統(tǒng)的邏輯架構(gòu)、功能架構(gòu)、物理架構(gòu)與技術(shù)架構(gòu)。
2．1邏輯架構(gòu)
系統(tǒng)總體架框架由數(shù)據(jù)層、管理層和應(yīng)用層3部分構(gòu)成，數(shù)據(jù)層是指通過(guò)對(duì)歷史收集、專項(xiàng)調(diào)查、在線傳輸?shù)确绞绞占捎脭?shù)據(jù)集、數(shù)據(jù)庫(kù)方式進(jìn)行數(shù)據(jù)存儲(chǔ)與管理；管理層是指對(duì)使用系統(tǒng)的用戶進(jìn)行統(tǒng)一認(rèn)證、用戶管理、數(shù)據(jù)授權(quán)等實(shí)現(xiàn)用戶有效可控的管理；應(yīng)用層是指為用戶提供數(shù)據(jù)的在線查詢檢索、數(shù)據(jù)時(shí)空分布檢索、產(chǎn)品加工處理等應(yīng)用服務(wù)，滿足用戶多樣化的需求。應(yīng)用層與管理層通過(guò)內(nèi)網(wǎng)和專網(wǎng)訪問(wèn)數(shù)據(jù)層，實(shí)現(xiàn)數(shù)據(jù)的管理、查詢、處理等服務(wù)。
（1）數(shù)據(jù)層。數(shù)據(jù)層主要由原始數(shù)據(jù)、基礎(chǔ)數(shù)據(jù)和成果數(shù)據(jù)3部分組成。原始數(shù)據(jù)是指海洋儀器現(xiàn)場(chǎng)采集的原始資料、現(xiàn)場(chǎng)匯交的紙質(zhì)或者電子資料等。原始數(shù)據(jù)采用文件方式存儲(chǔ)，基于原始資料清單和數(shù)據(jù)庫(kù)文件目錄等方式進(jìn)行管理。類型包括海洋觀測(cè)原始資料、海洋監(jiān)測(cè)原始資料、專項(xiàng)調(diào)查匯交資料等?；A(chǔ)數(shù)據(jù)是指對(duì)原始數(shù)據(jù)進(jìn)行整理、排重、質(zhì)量控制等處理之后形成的標(biāo)準(zhǔn)化數(shù)據(jù)。內(nèi)容主要包括專項(xiàng)調(diào)查數(shù)據(jù)、觀測(cè)實(shí)時(shí)資料數(shù)據(jù)與國(guó)際業(yè)務(wù)化數(shù)據(jù)等，專項(xiàng)調(diào)查數(shù)據(jù)包括水文、氣象等9個(gè)學(xué)科，觀測(cè)實(shí)時(shí)資料數(shù)據(jù)包括海洋站、雷達(dá)、浮標(biāo)等?；A(chǔ)數(shù)據(jù)采用數(shù)據(jù)庫(kù)存儲(chǔ)方式，根據(jù)基礎(chǔ)數(shù)據(jù)的資料類型、資料格式、數(shù)據(jù)觀測(cè)頻率、數(shù)據(jù)傳輸頻率、數(shù)據(jù)量等設(shè)計(jì)數(shù)據(jù)庫(kù)結(jié)構(gòu)。成果數(shù)據(jù)是指經(jīng)過(guò)信息提取、多源數(shù)據(jù)融合、數(shù)值模型分析、統(tǒng)計(jì)分析等手段處理后形成的數(shù)據(jù)。成果數(shù)據(jù)由要素?cái)?shù)據(jù)、成果專題數(shù)據(jù)、資料目錄數(shù)據(jù)組成，采用數(shù)據(jù)庫(kù)存儲(chǔ)方式。要素?cái)?shù)據(jù)是以基礎(chǔ)數(shù)據(jù)為基礎(chǔ)，根據(jù)數(shù)據(jù)的專題應(yīng)用保障和服務(wù)需求，按照時(shí)間、空間、專題要素等進(jìn)行組織的數(shù)據(jù)。成果專題數(shù)據(jù)主要包括數(shù)值型產(chǎn)品和圖形產(chǎn)品，涵蓋海洋再分析產(chǎn)品、實(shí)況分析產(chǎn)品、潮汐預(yù)報(bào)產(chǎn)品和海洋專題產(chǎn)品等。資料目錄數(shù)據(jù)主要包括原始數(shù)據(jù)集目錄索引、標(biāo)準(zhǔn)數(shù)據(jù)集目錄索引、產(chǎn)品數(shù)據(jù)目錄索引等。
（2）管理層。管理層主要負(fù)責(zé)系統(tǒng)的用戶管理、資源管理、業(yè)務(wù)流程管理和運(yùn)行監(jiān)控管理等內(nèi)容。用戶管理包括用戶的創(chuàng)建、更改和刪除、角色管理、功能授權(quán)與數(shù)據(jù)授權(quán)；資源管理包括目錄索引管理、數(shù)據(jù)導(dǎo)航管理、信息管理與信息資源管理；業(yè)務(wù)流程管理包括數(shù)據(jù)申請(qǐng)、虛擬機(jī)管理、數(shù)據(jù)審批管理等；運(yùn)行監(jiān)控管理包括運(yùn)行環(huán)境監(jiān)控、數(shù)據(jù)資源監(jiān)控與用戶行為監(jiān)控。
（3）應(yīng)用層。應(yīng)用層依托于中心內(nèi)網(wǎng)和海洋專網(wǎng)，基于并行數(shù)據(jù)庫(kù)技術(shù)和虛擬化技術(shù)，實(shí)現(xiàn)海洋局屬單位間的數(shù)據(jù)在線服務(wù)。應(yīng)用層主要包括：數(shù)據(jù)時(shí)空分布展示、數(shù)據(jù)查詢檢索服務(wù)、數(shù)據(jù)共享虛擬環(huán)境、產(chǎn)品制作與產(chǎn)品導(dǎo)出功能。數(shù)據(jù)時(shí)空分布展示是利用數(shù)據(jù)的經(jīng)緯度、時(shí)間范圍、站次數(shù)等關(guān)鍵信息，通過(guò)統(tǒng)計(jì)計(jì)算數(shù)據(jù)量，依據(jù)色彩圖例，進(jìn)行時(shí)空分布展示。數(shù)據(jù)查詢檢索服務(wù)包括數(shù)據(jù)庫(kù)查詢檢索和數(shù)據(jù)集查詢檢索。該服務(wù)可提供基于矢量地圖及影像地圖的地圖顯示控件的數(shù)據(jù)查詢服務(wù)，以及使用關(guān)鍵字對(duì)數(shù)據(jù)進(jìn)行查詢。產(chǎn)品制作是指對(duì)資料進(jìn)行整理、標(biāo)準(zhǔn)化處理，開(kāi)展數(shù)據(jù)識(shí)別、解碼等預(yù)處理操作，利用數(shù)據(jù)統(tǒng)計(jì)分析工具進(jìn)行產(chǎn)品的加工制作。產(chǎn)品導(dǎo)出是指對(duì)用戶加工制作產(chǎn)生的產(chǎn)品成果提供數(shù)據(jù)的導(dǎo)出功能，實(shí)現(xiàn)數(shù)據(jù)從虛擬機(jī)到本機(jī)的導(dǎo)出服務(wù)。
2．2物理架構(gòu)
按照系統(tǒng)設(shè)計(jì)，對(duì)系統(tǒng)運(yùn)行硬件環(huán)境進(jìn)行搭建，硬件環(huán)境涵蓋原始數(shù)據(jù)文件存儲(chǔ)區(qū)、數(shù)據(jù)庫(kù)存儲(chǔ)區(qū)、數(shù)據(jù)處理區(qū)、數(shù)據(jù)服務(wù)區(qū)。按照網(wǎng)絡(luò)布局可化為中心內(nèi)網(wǎng)和海洋專網(wǎng)，內(nèi)網(wǎng)為中心內(nèi)部用戶提供在線服務(wù)的入口，專網(wǎng)主要包括海洋觀測(cè)網(wǎng)、海洋監(jiān)測(cè)網(wǎng)、數(shù)字海洋網(wǎng)；數(shù)字海洋網(wǎng)為海洋局屬單位提供在線服務(wù)的入口，用戶經(jīng)由內(nèi)網(wǎng)／數(shù)字海洋網(wǎng)通過(guò)VPN身份認(rèn)證后方可進(jìn)入用戶主頁(yè)，通過(guò)登錄進(jìn)入個(gè)人虛擬工作環(huán)境（即用戶虛擬機(jī)），用戶可在虛擬機(jī)中對(duì)數(shù)據(jù)進(jìn)行查詢、處理和產(chǎn)品制作。系統(tǒng)經(jīng)由海洋觀測(cè)網(wǎng)和海洋監(jiān)測(cè)網(wǎng)接收實(shí)時(shí)、延時(shí)觀測(cè)和監(jiān)測(cè)的海洋數(shù)據(jù)，并發(fā)送到系統(tǒng)的文件存儲(chǔ)區(qū)和處理資料臨時(shí)存儲(chǔ)區(qū)，由存儲(chǔ)管理系統(tǒng)進(jìn)行數(shù)據(jù)的接收、存儲(chǔ)和管理。利用用戶授權(quán)管理將數(shù)據(jù)分發(fā)到數(shù)據(jù)處理用戶的虛擬機(jī)中。數(shù)據(jù)處理用戶通過(guò)中心內(nèi)網(wǎng)登錄到虛擬機(jī)后，開(kāi)展數(shù)據(jù)整理、標(biāo)準(zhǔn)化處理工作后，將處理結(jié)果按照指定的路徑存放。由數(shù)據(jù)傳輸系統(tǒng)同步傳輸?shù)疆a(chǎn)品制作用戶的虛擬機(jī)中，用戶可開(kāi)展產(chǎn)品加工制作并將成果按照指定的路徑存放。最終由數(shù)據(jù)交換系統(tǒng)存儲(chǔ)到統(tǒng)一的資料存儲(chǔ)管理區(qū)。ETL處理系統(tǒng)經(jīng)過(guò)數(shù)據(jù)抽取、清洗、轉(zhuǎn)換等處理，將數(shù)據(jù)處理結(jié)果和產(chǎn)品加載入庫(kù)，最終經(jīng)由中心內(nèi)網(wǎng)和海洋專網(wǎng)為海洋局屬單位提供數(shù)據(jù)共享服務(wù)。
3系統(tǒng)功能實(shí)現(xiàn)
系統(tǒng)通過(guò)用戶唯一入口登錄，保證數(shù)據(jù)安全；開(kāi)發(fā)數(shù)據(jù)處理系統(tǒng)，完成數(shù)據(jù)格式化轉(zhuǎn)換；利用ETL處理系統(tǒng)，完成并行數(shù)據(jù)庫(kù)的數(shù)據(jù)處理與調(diào)度，包括數(shù)據(jù)抽取、數(shù)據(jù)轉(zhuǎn)換與清洗及數(shù)據(jù)加載；開(kāi)發(fā)數(shù)據(jù)庫(kù)檢索、數(shù)據(jù)集檢索、文件輸出審批和文件導(dǎo)出等應(yīng)用程序；開(kāi)發(fā)系統(tǒng)運(yùn)行監(jiān)控管理系統(tǒng)，對(duì)系統(tǒng)的運(yùn)行環(huán)境、數(shù)據(jù)狀況和用戶行為進(jìn)行監(jiān)控和管理。
3．1數(shù)據(jù)處理分系統(tǒng)
3．1．1實(shí)時(shí)數(shù)據(jù)處理子系統(tǒng)
根據(jù)海洋環(huán)境數(shù)據(jù)觀測(cè)的采集規(guī)范和編碼規(guī)定，對(duì)接收、收集和整合的大量海洋調(diào)查、業(yè)務(wù)化觀測(cè)／監(jiān)測(cè)等資料，按照資料類型、觀測(cè)儀器、觀測(cè)手段、要素內(nèi)容等特點(diǎn)，開(kāi)展數(shù)據(jù)識(shí)別、解碼、數(shù)字化、數(shù)據(jù)項(xiàng)檢查、代碼檢查等預(yù)處理，按照時(shí)間、空間和觀測(cè)資料類型進(jìn)行排重、排序和初步質(zhì)量控制，剔除異常數(shù)據(jù)，依據(jù)數(shù)據(jù)來(lái)源、時(shí)間、地點(diǎn)等信息對(duì)數(shù)據(jù)文件進(jìn)行挑選、過(guò)濾、分類存放，同時(shí)完善和新建相應(yīng)的海洋環(huán)境數(shù)據(jù)存儲(chǔ)標(biāo)準(zhǔn)，對(duì)資料進(jìn)行標(biāo)準(zhǔn)化格式轉(zhuǎn)換。
3．1．2歷史數(shù)據(jù)處理子系統(tǒng)
系統(tǒng)根據(jù)海洋環(huán)境數(shù)據(jù)觀測(cè)設(shè)備性能、儀器訂正參數(shù)、資料種類、觀測(cè)要素類型、觀測(cè)方式、資料時(shí)空分布、要素?cái)?shù)據(jù)經(jīng)驗(yàn)范圍等特點(diǎn)，配置質(zhì)量控制參數(shù)，采用相應(yīng)的質(zhì)量控制方法，對(duì)各類海洋環(huán)境數(shù)據(jù)進(jìn)行精細(xì)化的計(jì)算機(jī)自動(dòng)質(zhì)量控制和人工審核。質(zhì)量控制方法包括范圍檢驗(yàn)、非法碼檢驗(yàn)、相關(guān)檢驗(yàn)、季節(jié)性檢驗(yàn)、一致性檢驗(yàn)、著陸點(diǎn)檢驗(yàn)、梯度檢驗(yàn)、尖峰檢驗(yàn)、氣候?qū)W檢驗(yàn)和極值檢驗(yàn)等。
3．2數(shù)據(jù)庫(kù)加載分系統(tǒng)
數(shù)據(jù)庫(kù)加載系統(tǒng)包括通用數(shù)據(jù)庫(kù)加載系統(tǒng)與并行數(shù)據(jù)庫(kù)加載系統(tǒng)。通用數(shù)據(jù)庫(kù)加載系統(tǒng)是通過(guò)加載文件清單的方式進(jìn)行數(shù)據(jù)管理，清單文件是對(duì)每類數(shù)據(jù)的特征描述，包括文件類型、文件名、調(diào)查機(jī)構(gòu)、絕對(duì)路徑、備注等信息，通過(guò)一條記錄就可以確認(rèn)數(shù)據(jù)類型并找到數(shù)據(jù)存儲(chǔ)位置。清單文件的組織結(jié)構(gòu)與數(shù)據(jù)庫(kù)表結(jié)構(gòu)一致，且加載系統(tǒng)可實(shí)現(xiàn)清單列名與數(shù)據(jù)庫(kù)列名對(duì)應(yīng)關(guān)系的動(dòng)態(tài)調(diào)整，清單配置文件設(shè)置完成后，單擊上傳，將清單的記錄入庫(kù)，加載過(guò)程中可通過(guò)狀態(tài)條查看加載進(jìn)度。并行數(shù)據(jù)庫(kù)加載系統(tǒng)先按照數(shù)據(jù)庫(kù)結(jié)構(gòu)利用ETL處理系統(tǒng)通過(guò)抽取數(shù)據(jù)文件的相關(guān)信息形成庫(kù)文件，將庫(kù)文件存放在規(guī)定的目錄下，并查看庫(kù)文件的文件表結(jié)構(gòu)，創(chuàng)建相應(yīng)的數(shù)據(jù)庫(kù)表，創(chuàng)建shell腳本并制定源文件和目標(biāo)文件，最后寫(xiě)入數(shù)據(jù)庫(kù)。
3．3數(shù)據(jù)查詢檢索分系統(tǒng)
系統(tǒng)主要分為兩大模塊：關(guān)鍵字查詢和圖形化檢索。系統(tǒng)界面左側(cè)顯示海洋資料體系結(jié)構(gòu)，右側(cè)用于經(jīng)緯度區(qū)域選擇地圖和查詢結(jié)果瀏覽。用戶首先在左側(cè)選擇相應(yīng)的航次，然后在右側(cè)地圖圈定需求的區(qū)域，再輸入關(guān)鍵字，查詢?cè)搮^(qū)域的特定信息，或查詢特定區(qū)域的所有信息，或查詢所有區(qū)域的特定信息，并能夠?qū)Σ樵兘Y(jié)果進(jìn)行統(tǒng)計(jì)、排序、固定格式表格的導(dǎo)出。
3．4運(yùn)行監(jiān)控管理分系統(tǒng)
通過(guò)建立運(yùn)行環(huán)境監(jiān)控信息數(shù)據(jù)庫(kù)，確定數(shù)據(jù)庫(kù)中各類監(jiān)控信息表、監(jiān)控要素字段、監(jiān)控狀態(tài)字段、表關(guān)系和數(shù)據(jù)字典等，實(shí)現(xiàn)運(yùn)行環(huán)境監(jiān)控、數(shù)據(jù)監(jiān)控與用戶行為監(jiān)控的實(shí)體建設(shè)。
3．4．1運(yùn)行環(huán)境監(jiān)控與管理子系統(tǒng)
運(yùn)行環(huán)境監(jiān)控與管理子系統(tǒng)包括硬件環(huán)境監(jiān)控和軟件環(huán)境監(jiān)控兩部分。硬件環(huán)境監(jiān)控是通過(guò)對(duì)系統(tǒng)局域網(wǎng)硬件設(shè)備運(yùn)行的日志信息進(jìn)行提取、分析，實(shí)現(xiàn)對(duì)服務(wù)器、存儲(chǔ)陣列、交換機(jī)、路由器、防火墻等設(shè)備故障診斷、告警等功能。軟件環(huán)境監(jiān)控是通過(guò)研制各商業(yè)軟件（操作系統(tǒng)、數(shù)據(jù)庫(kù)軟件等）與各業(yè)務(wù)系統(tǒng)（數(shù)據(jù)處理軟件等）運(yùn)行日志讀取接口，實(shí)時(shí)讀取日志信息并加載運(yùn)行環(huán)境監(jiān)控信息數(shù)據(jù)庫(kù)。
3．4．2數(shù)據(jù)資源監(jiān)控與管理子系統(tǒng)
數(shù)據(jù)資源監(jiān)控與管理子系統(tǒng)通過(guò)對(duì)數(shù)據(jù)匯集狀態(tài)實(shí)時(shí)監(jiān)控，實(shí)現(xiàn)信息反饋、到期告警、匯集情況季報(bào)與年報(bào)輸出等功能，實(shí)現(xiàn)對(duì)海洋數(shù)據(jù)處理和質(zhì)量情況的實(shí)時(shí)監(jiān)控和預(yù)警、數(shù)據(jù)處理任務(wù)。調(diào)度管理；通過(guò)提取用戶登錄日志、數(shù)據(jù)庫(kù)與數(shù)據(jù)集訪問(wèn)日志、數(shù)據(jù)申請(qǐng)信息進(jìn)行分析，實(shí)現(xiàn)數(shù)據(jù)的服務(wù)內(nèi)容、服務(wù)對(duì)象、應(yīng)用領(lǐng)域情況的實(shí)時(shí)監(jiān)控。
3．4．3用戶行為監(jiān)控與管理子系統(tǒng)
用戶行為監(jiān)控與管理子分系統(tǒng)實(shí)時(shí)對(duì)用戶的登錄、數(shù)據(jù)資源訪問(wèn)、外部設(shè)備使用、軟件安裝預(yù)警和設(shè)備接入等行為進(jìn)行監(jiān)控，具有終止用戶操作、告警提示、季度分析報(bào)告輸出等功能，在提供用戶方便使用的前提下保障系統(tǒng)的穩(wěn)定運(yùn)行。
4關(guān)鍵技術(shù)
根據(jù)系統(tǒng)總體功能定位，在已有的工作基礎(chǔ)之上，以數(shù)據(jù)的匯集、處理、存儲(chǔ)、管理、服務(wù)過(guò)程為主線，采用操作系統(tǒng)、數(shù)據(jù)庫(kù)、數(shù)據(jù)管理與共享3層軟件體系，集成各類自主研發(fā)功能，構(gòu)建靈活、穩(wěn)定的架構(gòu)模式。架構(gòu)主要基于虛擬化技術(shù)、并行處理技術(shù)、數(shù)據(jù)檢索并行處理技術(shù)與J2EE技術(shù)等關(guān)鍵技術(shù)。
4．1虛擬化技術(shù)
由于用戶對(duì)處理器、內(nèi)存等硬件和操作系統(tǒng)需求不同，用戶工作使用的數(shù)據(jù)處理軟件、資料質(zhì)量控制軟件和產(chǎn)品制作軟件不盡相同，為滿足用戶需求，同時(shí)提高服務(wù)器、存儲(chǔ)陣列等資源的利用率，采用服務(wù)器虛擬化技術(shù)實(shí)現(xiàn)滿足不同用戶需求的虛擬機(jī)，同時(shí)消除服務(wù)器與存儲(chǔ)陣列對(duì)應(yīng)用系統(tǒng)的物理局限性。服務(wù)器虛擬化技術(shù)是將一個(gè)物理服務(wù)器虛擬成若干個(gè)服務(wù)器使用，使得單個(gè)物理服務(wù)器上可以運(yùn)行多個(gè)虛擬服務(wù)器。
4．2并行處理技術(shù)
利用高速并行處理引擎，完成多層次海洋數(shù)據(jù)體系動(dòng)態(tài)更新的ETL（抽取、轉(zhuǎn)換、加載）并行處理，實(shí)現(xiàn)整個(gè)系統(tǒng)的數(shù)據(jù)處理與調(diào)度，包括數(shù)據(jù)抽取、數(shù)據(jù)傳輸、數(shù)據(jù)轉(zhuǎn)換與清洗、數(shù)據(jù)加載以及調(diào)度監(jiān)控。
4．2．1數(shù)據(jù)抽取
數(shù)據(jù)抽取的方式包括：全表刷新、時(shí)間戳增量、日志增量和時(shí)間戳比較。系統(tǒng)采用時(shí)間戳增量方式完成數(shù)據(jù)的抽取，時(shí)間戳增量方式是通過(guò)記錄時(shí)間將增量數(shù)據(jù)從源數(shù)據(jù)抽取出來(lái)，以附加的方式加載到高速數(shù)據(jù)存儲(chǔ)中，完成源數(shù)據(jù)中的記錄定期更新。時(shí)間戳增量方式是在源系統(tǒng)需要抽取的數(shù)據(jù)表中增加時(shí)間戳字段，用以表示數(shù)據(jù)的修改或新增時(shí)間，在數(shù)據(jù)抽取時(shí)通過(guò)它來(lái)識(shí)別和抽取增量數(shù)據(jù)。
4．2．2數(shù)據(jù)轉(zhuǎn)換
由于海洋數(shù)據(jù)通過(guò)調(diào)查、匯交、網(wǎng)載等多種手段獲取，每種手段來(lái)源的數(shù)據(jù)存在定義不規(guī)范、格式不統(tǒng)一等情況，導(dǎo)致系統(tǒng)的源數(shù)據(jù)存在重復(fù)、錯(cuò)誤、格式不一等情況。數(shù)據(jù)轉(zhuǎn)換是將多來(lái)源、多調(diào)查手段、多要素和多格式的數(shù)據(jù)進(jìn)行轉(zhuǎn)換，形成格式統(tǒng)一、實(shí)用性強(qiáng)的數(shù)據(jù)存儲(chǔ)層。
4．2．3數(shù)據(jù)加載
將業(yè)務(wù)系統(tǒng)和源數(shù)據(jù)庫(kù)層抽取、轉(zhuǎn)換后的數(shù)據(jù)加載、更新到目標(biāo)數(shù)據(jù)庫(kù)中。根據(jù)業(yè)務(wù)數(shù)據(jù)的實(shí)際情況，對(duì)不同業(yè)務(wù)系統(tǒng)的數(shù)據(jù)采用不同的加載周期；根據(jù)數(shù)據(jù)的抽取策略以及業(yè)務(wù)規(guī)則確定，采用直接追加、全部覆蓋、更新追加等多種方式進(jìn)行處理。
4．2．4高速并行調(diào)度
利用高速并行ETL調(diào)度，按照既定步驟完成數(shù)據(jù)抽取、轉(zhuǎn)換、加載的全部時(shí)間和流程的調(diào)度任務(wù)。調(diào)度的內(nèi)容包括：從各業(yè)務(wù)系統(tǒng)到數(shù)據(jù)層的調(diào)度，實(shí)現(xiàn)多來(lái)源數(shù)據(jù)的提取、轉(zhuǎn)換和加載；從數(shù)據(jù)層到數(shù)據(jù)存儲(chǔ)的調(diào)度，實(shí)現(xiàn)了原始數(shù)據(jù)、基礎(chǔ)數(shù)據(jù)、產(chǎn)品數(shù)據(jù)的高速并行存儲(chǔ)；從數(shù)據(jù)存儲(chǔ)到應(yīng)用層的調(diào)度，實(shí)現(xiàn)數(shù)據(jù)的并行查詢檢索。
5結(jié)束語(yǔ)