亚洲成色777777女色窝,777亚洲妇女,色吧亚洲日本,亚洲少妇视频

大數(shù)據(jù)開發(fā)的過程

時間:2023-05-19 16:04:58

導語:在大數(shù)據(jù)開發(fā)的過程的撰寫旅程中,學習并吸收他人佳作的精髓是一條寶貴的路徑,好期刊匯集了九篇優(yōu)秀范文,愿這些內(nèi)容能夠啟發(fā)您的創(chuàng)作靈感,引領您探索更多的創(chuàng)作可能。

大數(shù)據(jù)開發(fā)的過程

第1篇

通過一系列收購,EMC已經(jīng)建立了一條比較完善的大數(shù)據(jù)產(chǎn)品線。在此基礎上,EMC拋出了大數(shù)據(jù)之旅的三段論。

第一關:構(gòu)建云基礎架構(gòu)

大數(shù)據(jù)分析和處理的基礎是完善的云基礎架構(gòu),主要包括大數(shù)據(jù)存儲和大數(shù)據(jù)分析兩個平臺。

EMC大數(shù)據(jù)存儲平臺的兩大支柱產(chǎn)品是Isilon集群NAS以及Atmos海量智能存儲。Isilon集群NAS是EMC兩年前收購的產(chǎn)品,具有很強的橫向擴展能力,使用起來非常方便。目前,Isilon集群NAS被用于許多云存儲的項目。Atmos海量智能存儲可以很好地支持分布式大數(shù)據(jù)計算。許多電信運營商基于Atmos構(gòu)建了公有云系統(tǒng),其部署非常簡單,而且性價比很高。

EMC的大數(shù)據(jù)解決方案分成純軟件和軟硬件一體兩種。Isilon集群NAS與Greenplum軟件組成了一體化解決方案。蔡漢輝介紹說:“Isilon集群NAS目前主要作為大數(shù)據(jù)存儲平臺,可與Greenplum、Hadoop結(jié)合,但同時也會兼顧傳統(tǒng)存儲應用。為了更好地支持大數(shù)據(jù)和云服務,Isilon集群NAS在今年底還會開放API,讓更多第三方的廠商能基于Isilon集群NAS平臺進行開發(fā)?!?/p>

EMC大數(shù)據(jù)分析平臺的核心是兩年前收購得來的Greenplum的產(chǎn)品,主要包括Greenplum Database(支持結(jié)構(gòu)化數(shù)據(jù)庫)和Greenplum HD(支持Hadoop)。蔡漢輝介紹說:“Greenplum大數(shù)據(jù)分析平臺可以實時處理任何來源的數(shù)據(jù),包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)。Greenplum不僅可以處理PB級的數(shù)據(jù),而且處理速度可以達到10TB/h?!?/p>

第二關:實現(xiàn)社交化服務

構(gòu)建高性能、可靠、靈活的大數(shù)據(jù)分析平臺是第一步,接下來,用戶要構(gòu)建數(shù)據(jù)處理的協(xié)作平臺,建立自助服務的環(huán)境。EMC把這個階段稱為社交化階段。

2012年3月,EMC了首個用于大數(shù)據(jù)的社交工具集Greenplum Chorus,使得數(shù)據(jù)科學家可以通過類似Facebook的社交方式進行協(xié)作。Greenplum Chorus是EMC中國研發(fā)團隊主導開發(fā)的產(chǎn)品。Greenplum Chorus基于開放的架構(gòu),是一個用于數(shù)據(jù)挖掘和協(xié)作分析的流程平臺。Greenplum Chorus包括數(shù)據(jù)探索、個人項目工作空間(又稱個人沙盒)、數(shù)據(jù)分析和幾個主要環(huán)節(jié)。

Greenplum Chorus開發(fā)主管莊富任介紹了Greenplum Chorus的工作流程:Greenplum Chorus提供了強大的搜索引擎,可以快速尋找到數(shù)據(jù),并將這些數(shù)據(jù)進行關聯(lián),從而實現(xiàn)數(shù)據(jù)采集的可視化;采集來的數(shù)據(jù)被放到個人沙盒中進行處理,這個處理過程不會影響整個數(shù)據(jù)庫的運行;在協(xié)作分析階段,數(shù)據(jù)分析人員可以共享工作空間、代碼,協(xié)同工作兼具靈活性和安全性;最后,相關的處理結(jié)果被出來。上述處理過程將循環(huán)往復。

Greenplum Chorus未來將走向開源。EMC已經(jīng)了一個名為OpenChorus的計劃,其目標是促進技術創(chuàng)新,同時促進那些運行在Greenplum Chorus平臺上的協(xié)作的、社交化的數(shù)據(jù)應用的普及。2012年下半年,EMC還將公布Greenplum Chorus源代碼,讓更多人加入到Greenplum Chorus陣營中來。

第三關:敏捷開發(fā)服務

大數(shù)據(jù)處理的第三個階段就是構(gòu)建一個敏捷的開發(fā)環(huán)境,用于實時決策,并且更好地支持大數(shù)據(jù)應用程序。

從形式上看,傳統(tǒng)的大數(shù)據(jù)方案包括打包方案和定制化開發(fā)兩種。打包方案具有高效率、低成本的優(yōu)勢,但是需要精確的數(shù)據(jù)模型。定制化開發(fā)可以實現(xiàn)應用的創(chuàng)新,但是實施起來難度大,周期長,而且價格昂貴。EMC希望為用戶提供一種敏捷開發(fā)的方式,在充分發(fā)揮上述兩種方案優(yōu)勢的同時彌補其不足。為此,2012年3月,EMC收購了Pivotal Labs公司。Pivotal Labs是一家私營的敏捷軟件開發(fā)服務和工具提供商。

第2篇

關鍵詞:大數(shù)據(jù)時代;軟件工程;技術分析

1大數(shù)據(jù)時代概述

目前隨著科學技術的不斷發(fā)展,互聯(lián)網(wǎng)技術應用到社會的各個層次各個領域中,人類社會的發(fā)展已越來越離不開網(wǎng)絡技術的支持。大數(shù)據(jù)時代即在這種背景下應運而生,人們可以將大數(shù)據(jù)通俗地理解成數(shù)量極其龐大的數(shù)據(jù)信息,是計算機軟件技術發(fā)展的一次偉大變革,而且對社會及人們生活的影響作用逐漸增強,被廣泛地應用于企業(yè)管理及公共事務管理等各個方面,促進社會向更高層次發(fā)展。同時,不同類型和領域的信息數(shù)據(jù)收集既是從事生產(chǎn)和生活的最基本元素,更是計算機軟件工程的最原始依據(jù)。大數(shù)據(jù)時代的背景下,軟件開發(fā)人員可以更加方便地獲取數(shù)據(jù)信息,同時也對其更好地應用這些數(shù)據(jù)提出了更高的要求??傊?,大數(shù)據(jù)時代需要大量先進的軟件技術人員,領悟大數(shù)據(jù)時代的真正內(nèi)涵,并將大數(shù)據(jù)時代的精髓更好地運用到技術分析中去[1]。

2軟件工程技術現(xiàn)狀分析

進入互聯(lián)網(wǎng)階段,計算機軟件工程技術處于高速發(fā)展的態(tài)勢,大數(shù)據(jù)時代背景下,要求計算機軟件工程技術結(jié)合大數(shù)據(jù)技術,更好地服務社會。當前情況下,與大數(shù)據(jù)有關計算機軟件技術包含虛擬化技術(VirtualReality,VR)和云儲存技術,VR技術能提高信息處理的速度,云儲存技術提高了信息數(shù)據(jù)的儲存效率。大數(shù)據(jù)技術同時具備專業(yè)性和實用性的特點,對軟件工程技術工作提出了更高的要求,不僅能收集整理各種各樣的數(shù)據(jù)信息,保證數(shù)據(jù)信息的安全性和有效性,剔除數(shù)據(jù)信息對軟件分析的不良影響,更要能利用大數(shù)據(jù)不斷創(chuàng)新思路。對于我國現(xiàn)階段的軟件工程技術水平來說,要認識到與發(fā)達國家相比,還存在著一定的差距,因此軟件工程技術人員更要適應大數(shù)據(jù)時代的潮流,讓軟件工程技術工作提到更高的臺階[2]。

3大數(shù)據(jù)時代背景下軟件工程技術分析

3.1軟件工程技術分析全新思路及方法

在軟件工程技術分析長期的發(fā)展過程中,逐步形成了一套固有的思想與設計方法,對軟件工程技術工作起到了一定的促進作用。同時,時代是進步和發(fā)展的,軟件工程技術者也要用發(fā)展的思維模式對待工作。在大數(shù)據(jù)時代背景下,軟件工程技術工作需要適應時代的要求,在原有理念的基礎上,力求探求更符合時代特色的軟件開發(fā)思想和理念。首先,根據(jù)大數(shù)據(jù)時代大數(shù)據(jù)處理的特殊形式,考慮如何更好地開發(fā)出更能支持數(shù)據(jù)處理的軟件系統(tǒng),逐步形成獨特的面向大數(shù)據(jù)的軟件工程技術思想,使用適應于大數(shù)據(jù)時代特點的軟件工程技術方法。其次,在軟件工程技術工作過程中,技術人員會接觸到很多軟件過程數(shù)據(jù),或多或少都具備一些大數(shù)據(jù)的特點,所以軟件技術人員應該認真分析數(shù)據(jù)的特征,找出有利用價值的數(shù)據(jù)群,并充分利用這些有價值的數(shù)據(jù),力求在探求的過程中發(fā)現(xiàn)可能的軟件工程規(guī)律,并將其運用到后續(xù)軟件工程技術的工作中去,這樣反復不斷地分析思想及方法的更新,會促進技術人員逐步形成基于大數(shù)據(jù)的軟件工程技術分析方法,其正是適用于大數(shù)據(jù)時代背景下寶貴的軟件工程技術分析方法[3]。

3.2軟件工程技術需要全新的技術手段和工具

對于軟件工程技術分析而言,在很長的一段時間內(nèi),技術手段比較單一,技術分析工具比較簡單,這些手段及工具適用于比較單純的分析對象,但是對于大數(shù)據(jù)時代背景下的數(shù)據(jù)處理就顯得捉襟見肘了,尤其對于大交匯數(shù)據(jù)的處理,不能做到全面研究,因此軟件工程技術仍然需要新的技術手段和工作。鑒于現(xiàn)代社會生產(chǎn)及生活特點,大數(shù)據(jù)的范圍包羅萬象,大數(shù)據(jù)來源于生產(chǎn)生活中的方方面面,不僅包括生產(chǎn)企業(yè)或消費者個人在生產(chǎn)或消費的過程中產(chǎn)生的各種交易數(shù)據(jù),還包含消費者在各類交易媒介中產(chǎn)生的大交匯數(shù)據(jù),諸如美團、支付寶等各類網(wǎng)絡終端或POS機、手機APP等移動終端中的大交匯數(shù)據(jù)。在這些數(shù)據(jù)中,交易數(shù)據(jù)通常情況下屬于結(jié)構(gòu)化的數(shù)據(jù),軟件開發(fā)者們在處理這些數(shù)據(jù)時,可以運用傳統(tǒng)的設計技術手段和工具來完成。但是大交匯數(shù)據(jù)一般狀況下屬于半結(jié)構(gòu)化甚至有些屬于非結(jié)構(gòu)化數(shù)據(jù),軟件開發(fā)者如果單純用傳統(tǒng)的數(shù)據(jù)處理方式將無法完整地處理這些數(shù)據(jù),不論是從存儲和管理方面,還是從更高層次的分析和應用層面,都要求軟件技術人員運用諸如云計算技術等新的手段及技術工具。與此同時,由于大數(shù)據(jù)具有涉及范圍廣、數(shù)據(jù)紛繁復雜的特點,軟件技術者必須具備將大數(shù)據(jù)并行分析的能力,并能從中挖掘出有利用價值的信息,這就要求軟件工程技術人員能準確地認識到傳統(tǒng)數(shù)據(jù)挖掘手段單點式挖掘依存性高、實時性差等不足,探尋針對大數(shù)據(jù)分布式存儲特點的數(shù)據(jù)處理方法,增強自身對快速變化的數(shù)據(jù)實時處理的能力。

3.3軟件工程技術需要全新的需求分析方式

從理論上講,軟件工程技術分析基本思路:軟件工程技術分析首要的工作即是進行嚴謹?shù)男枨蠓治?,深刻理解軟件需求者的真正需求,根?jù)需求確定要技術分析的軟件系統(tǒng)的功能需求、性能需求以及其他各方面的需求。繼而在此基礎上進行后續(xù)的軟件開發(fā)設計、測試及交付使用等其他重要工作。但是需求分析是軟件工程技術的先決條件,很大程度上決定了項目軟件設計最終能否成功交付。傳統(tǒng)的需求分析方式,一般是采用與軟件需求者進行面對面的交談或者對大眾需求者進行紙質(zhì)問卷調(diào)查的形式,軟件工程人員通過內(nèi)部成員收集到的信息進行全面討論,絕大多數(shù)情況下技術人員會滲透到業(yè)務流程中,因此必然會經(jīng)歷較長的過程,消耗較長的時間,使得軟件設計的時效性得不到很好的保證。在大數(shù)據(jù)時代的背景下,大數(shù)據(jù)時代數(shù)據(jù)繁雜瞬息萬變的特點要求必須加快軟件工程技術分析結(jié)果的推出進程,而且要滿足軟件升級換代的速度要求,軟件工程技術人員必須在短時間內(nèi)收集大量用戶的需求,并以最快的速度做出反應,完成相應的設計開發(fā)測試等工作,并在測試的過程中用同樣的方式收集測試用戶的反饋,對反饋意見歸納分析,運用到軟件系統(tǒng)的優(yōu)化工作中,使得設計產(chǎn)品迅速得到完善。實際上,在大數(shù)據(jù)時代背景下,想要獲取廣大軟件需求者的真正需求,并不需要需求者面對面直接參與,畢竟這種形式能參與的需求者并不會太多,甚至有時不具有代表性,軟件工程技術人員首先可以通過網(wǎng)上問卷調(diào)查的形式更大程度地了解受眾人群的需求,更重要的是借助大數(shù)據(jù)分析的手段,通過對需求者一系列的網(wǎng)上活動來獲取更加有價值的需求??傊?,大數(shù)據(jù)時代背景下軟件工程技術需求分析思想的變革,必然會引起軟件設計思維方式以及設計流程的變革[4]。

3.4軟件工程技術人才培養(yǎng)要有適合時代特色的培養(yǎng)方案和師資力量

軟件工程技術人才培養(yǎng),一定要圍繞時代特點來開展,因此軟件工程技術人才培養(yǎng)方案是應該不斷更新和優(yōu)化的。時代的變更、大數(shù)據(jù)時代的到來,必然會對原有的人才培養(yǎng)方案提出更高的要求。大數(shù)據(jù)時代需要軟件工程技術人員具有快速的反應能力、敏銳的觀察力和綜合分析能力,旨在培養(yǎng)和加強人員的實踐創(chuàng)新能力。軟件工程技術需要全新的思維模式和創(chuàng)新模式,更需要不斷向技術人員的隊伍注入新鮮的血液,大數(shù)據(jù)時代背景下,對專業(yè)軟件工程技術人員的培養(yǎng)工作刻不容緩,要想做好設計人員的培養(yǎng)工作,必須制定出符合大數(shù)據(jù)時代特點的專業(yè)培養(yǎng)方案,并依據(jù)培養(yǎng)方案的要求,儲備雄厚的師資力量。專業(yè)的培養(yǎng)方案為軟件工程技術人才培養(yǎng)指明了培養(yǎng)方向和目標,而雄厚的師資力量更是專業(yè)技術人才培養(yǎng)的重要保障,確保了軟件工程技術人才知識的先進性和專業(yè)性。大數(shù)據(jù)時代背景下,不論是從軟件工程技術思想和設計方法方面,還是從技術手段和技術工具上,以及需求分析方式上的轉(zhuǎn)變方面,都要在軟件工程技術培養(yǎng)方案中體現(xiàn)出來,也給培養(yǎng)方案的制定提出了更高的要求,其中培養(yǎng)目標和課程設置尤為重要,要一切以大數(shù)據(jù)時代特點為理論依據(jù),才會使培養(yǎng)方案更具時代特色,緊跟時代的步伐。在硬件方面,一批擁有過硬技術本領的師資隊伍的組建,是培養(yǎng)優(yōu)秀軟件工程技術人才的有力保證,同時用于實訓的實驗平臺的建設也要能跟上培養(yǎng)方案的要求。

4結(jié)語

綜上所述,大數(shù)據(jù)時代,為軟件工程技術分析帶來了新的挑戰(zhàn)和機遇,軟件工程技術要依托大數(shù)據(jù)時代的特點和要求,不斷優(yōu)化設計模式,主要體現(xiàn)在:全新的設計思想和設計方法、全新的技術手段和設計工具、全新的需求分析方式以及適合時代特色的培養(yǎng)方案和師資力量等方面。如何更好地抓住大數(shù)據(jù)時代機遇,并不斷迎接新的挑戰(zhàn),合理有序地做好這幾個方面的工作,是軟件工程技術人員需要重點考慮的問題。

[參考文獻]

[1]何克清,李兵,馬于濤,等.大數(shù)據(jù)時代的軟件工程關鍵技術[J].中國計算機學會通訊,2014(3):8-18.

[2]周明輝,郭長國.基于大數(shù)據(jù)的軟件工程新思維[J].中國計算機學會通訊,2014(3):37-41.

第3篇

大數(shù)據(jù)是互聯(lián)網(wǎng)技術變革所形成的新的社會態(tài)勢,也是未來社會需要面臨的主要社會形態(tài)。在大數(shù)據(jù)時代下,軟件工程技術與大數(shù)據(jù)技術呈現(xiàn)出互相影響、相互促進關系。面臨社會對軟件工程技術提出的機遇與挑戰(zhàn),相關人士需抓住機遇、迎接挑戰(zhàn),致力于軟件工程技術的開發(fā)與應用,提高信息數(shù)據(jù)處理能力,發(fā)揮我國各行業(yè)技術優(yōu)勢。

一、軟件工程技術定義

軟件工程技術是指應用計算機基礎技術,應用編程語言對軟件功能、軟件操作等內(nèi)容進行優(yōu)化,將其應用在信息處理之中。我國對軟件工程基礎技術研究起源于上個世紀八十年代,并首次召開了軟件工程研討會,將其作為一個具體學科也在八十年代初。現(xiàn)如今,軟件工程技術已經(jīng)成為一個普遍名詞,是各行業(yè)、各部門主要研究對象。

二、大數(shù)據(jù)時代下軟件工程關鍵技術

(一)軟件服務工程技術

軟件服務開發(fā)符合我國當下社會主流需求,也是社會發(fā)展的主流需要。其在技術上主要應用在服務功能比較明顯的軟件開發(fā)之中,主要是指以工程化形式,利用計算機系統(tǒng)編程語言、開發(fā)程式及步驟、數(shù)據(jù)系統(tǒng)等內(nèi)容,實現(xiàn)具備服務功能、應用功能軟件的開發(fā)。軟件工程開發(fā)以服務能力為核心,以虛擬特征以及分布樣式為基礎,對用戶具體應用情況進行調(diào)試,保障用戶應用軟件工程系統(tǒng)科學性、穩(wěn)定性、安全性。與此同時,服務軟件工程技術可實現(xiàn)應用數(shù)據(jù)之間的整合,提高軟件管理操作能力,對各項操作流程等進行明確。在大數(shù)據(jù)時代背景下,服務軟件工程開發(fā)技術更加傾向于局域網(wǎng)內(nèi)部應用,可以保護局域網(wǎng)內(nèi)部用戶不會受到木馬病毒惡意襲擊,極大程度保障軟件工程應用安全性。例如,某企業(yè)應用服務軟件工程技術,致力于服務與應用效果軟件系統(tǒng)開發(fā),將其應用在企業(yè)整體業(yè)務管理之中,為了提高軟件服務工程應用效率,賦予了軟件私人訂制功能,強化軟件服務工程自定義效果。由于該技術應用需要進行大量投資,在我國很多中小型企業(yè)中沒有得到廣泛應用,軟件工程開發(fā)人員需在深度市場調(diào)研基礎上,提高該技術應用能力[1]。

(二)眾包軟件服務工程

在眾多軟件工程技術中,大多數(shù)均具備的功能為處理信息、數(shù)據(jù)的集中性,可以生成大量數(shù)據(jù)信息,并呈現(xiàn)出集中性等特征。眾包軟件工程技術在世界各國均得到了廣泛普及,是各國的重點研究對象。該技術在應用過程中可以流式數(shù)據(jù)、密集數(shù)據(jù)研究為主,實現(xiàn)系統(tǒng)化服務平臺構(gòu)建,其核心應用價值在于具有很強服務能力,并以群體信息服務等方式,優(yōu)化自身應用價值。該軟件工程技術相比較企業(yè)技術而言,具有明顯優(yōu)勢,其在數(shù)據(jù)實質(zhì)表現(xiàn)上具有真實性特征,忽略了軟件形式要點,并不具備單位量化特征,重點突出在集中性上。眾包軟件工程技術具有很廣闊發(fā)展空間,在市場有很強的發(fā)展前景,其技術能力與軟件開發(fā)程度、系統(tǒng)管理能力息息相關,開發(fā)單位需重視該技術中數(shù)據(jù)傳輸有效性,促進軟件長久穩(wěn)定發(fā)展。眾包軟件工程技術以專業(yè)理論分析為依據(jù),可從整體角度實現(xiàn)數(shù)據(jù)信息傳輸、處理等功能,以全面服務為核心,實現(xiàn)軟件系統(tǒng)開發(fā)。企業(yè)及有關部門需強化眾包軟件開發(fā)技術應用,提高技術應用水平,在技術上進行創(chuàng)新,提高自身競爭實力。

(三)密集型數(shù)據(jù)科研技術

“第四范式”是密集數(shù)據(jù)研究一種,在2007年由吉姆格雷提出。在該技術理論研究過程中,強調(diào)大數(shù)據(jù)儲存技術應用價值性,以統(tǒng)一的理論方法作為數(shù)據(jù)研究主要支撐。在該技術開發(fā)與應用過程中,對其傳統(tǒng)軟件工程中一、二、三范式進行理論與數(shù)據(jù)分析,提高其短時間內(nèi)的數(shù)據(jù)儲存與信息處理能力。在經(jīng)過反復試驗對比之后,研究人員改變傳統(tǒng)思維模式,首先致力于“第四范式”數(shù)據(jù)結(jié)構(gòu)研究,在整合驅(qū)動大數(shù)據(jù)基礎上,對軟件服務價值進行了全面概述。針對密集型數(shù)據(jù)分析方式,傳統(tǒng)的數(shù)據(jù)周期、信息流程方法已經(jīng)無法適用,在模型效果上存在滯后性。研究人員以原本數(shù)據(jù)、信息、模型研究為基礎,對其數(shù)據(jù)服務、信息服務等進行推演,逐漸構(gòu)建出第四范式模型,對其服務能力、服務價值等進行了全面優(yōu)化?!暗谒姆妒健笔谴髷?shù)據(jù)時代下,軟件工程開發(fā)關鍵技術之一,在不斷的研究中得以完善,可以實現(xiàn)密集數(shù)據(jù)生命周期有效提高,以全新的數(shù)據(jù)模型,為軟件工程開發(fā)提供技術保障。有關部門需給予高度重視,使其能夠適應未來社會的發(fā)展。

(四)軟件工程技術在企業(yè)中應用

軟件工程技術在企業(yè)中應用主要體現(xiàn)在兩個方面,一是在信息通信中應用,二是在信息解決問題中應用。以某企業(yè)發(fā)展為例,某企業(yè)在運行過程中應用計算機軟件工程監(jiān)測技術,實現(xiàn)用戶信息數(shù)據(jù)有效處理,并對用戶信息進行科學保存。軟件工程技術在逐漸發(fā)展中,其功能也在不斷完善,信息通信功能可以為企業(yè)留存大量客源,具有十分巨大的行業(yè)價值。在信息解決方面應用軟件工程技術,其主要應用方向在于系統(tǒng)平臺管理,在大數(shù)據(jù)時代下,軟件工程技術需具備以下五個環(huán)節(jié),分別為產(chǎn)品抽樣、產(chǎn)品樣本采集、信息優(yōu)化修改、構(gòu)建數(shù)據(jù)模型、生產(chǎn)效果評定。企業(yè)應用軟件工程技術進行信息問題解決,可以實現(xiàn)企業(yè)整體數(shù)據(jù)的有效分析與整合,保障企業(yè)內(nèi)部信息準確、全面。所以。企業(yè)要重視軟件工程關鍵技術應用,提高自身軟件技術應用能力,致力于企業(yè)經(jīng)濟效益提高,進而提高自身競爭能力[2]。

結(jié)論:

總而言之,大數(shù)據(jù)時代在不斷深入發(fā)展過程中,國家以及企業(yè)均需要給予高度重視,在軟件工程技術開發(fā)上進行創(chuàng)新,并強化大數(shù)據(jù)時代下軟件工程理論與實踐研究,為企業(yè)發(fā)展提供更加優(yōu)質(zhì)技術服務。在未來發(fā)展中,軟件工程技術將會越來越完善,其在技術上能給予用戶更加優(yōu)質(zhì)服務,在信息處理速度與穩(wěn)定性上均會得到極大程度提高。

參考文獻:

第4篇

關鍵詞:大數(shù)據(jù);數(shù)據(jù)創(chuàng)新;數(shù)據(jù)公開

中圖分類號:C931 文獻標識碼:A DOI:10.3969/j.issn1003-8256.2013.02.010

網(wǎng)頁時代,google憑借強大的搜索功能搶得先機;社交媒體時代,facebook憑借領先的分享模式獨領;大數(shù)據(jù)時代,什么樣的企業(yè)能執(zhí)牛耳?

1、大數(shù)據(jù)時代的三種公司

按照牛津大學教授、《大數(shù)據(jù)時代:生活、工作與思維的大變革》作者維克托·邁爾·舍恩伯格的觀點,大數(shù)據(jù)產(chǎn)業(yè)的價值創(chuàng)造一般有三部分組成:數(shù)據(jù)本身、處理數(shù)據(jù)的技能以及利用數(shù)據(jù)的創(chuàng)新思維。這三者也分別代表了大數(shù)據(jù)產(chǎn)業(yè)中的三種公司類型。

大數(shù)據(jù)掌控公司。這類公司擁有大量數(shù)據(jù)或至少可以收集到大量數(shù)據(jù),卻不一定有從數(shù)據(jù)中提取價值的技能或者用數(shù)據(jù)催生創(chuàng)新的思想。最好的例子是twitter,它擁有海量數(shù)據(jù),但是它的數(shù)據(jù)都通過兩個獨立的公司授權給別人使用。

大數(shù)據(jù)技術公司。這一類公司通常是咨詢公司、技術供應商或者分析公司。它們掌握了專業(yè)技能但并不一定擁有數(shù)據(jù)或提出數(shù)據(jù)創(chuàng)新性用途的思想。比如,沃爾瑪和Pop-Tarts這兩家零售商就是借助天睿公司(Teradata)的分析來制定營銷方案—而天睿這樣的公司就是大數(shù)據(jù)分析公司。

大數(shù)據(jù)點子公司。Jetpac是通過想法將大數(shù)據(jù)轉(zhuǎn)化為價值的一個例子。這家公司通過用戶分享到網(wǎng)上的旅行照片來為人們推薦下次旅行的目的地。對于這些公司來說,數(shù)據(jù)和技能并不是成功的關鍵,讓這些公司脫穎而出的是其創(chuàng)始人和員工的創(chuàng)新思維,它們有實現(xiàn)數(shù)據(jù)新價值的獨特想法。一般來說,這類公司的創(chuàng)始人會是外行人,他們思考的只是將數(shù)據(jù)轉(zhuǎn)化為價值的可能性,而不考慮所謂的可行性—可行給技術人員操作。

當然,有一些公司,比如google,就是既擁有數(shù)據(jù),也具有技術,同時還不缺點子的公司。以上分類,舍恩伯格也認為,只是針對采用信息化系統(tǒng)已久的非互聯(lián)網(wǎng)公司的大數(shù)據(jù)價值鏈。而這些公司,正是大數(shù)據(jù)成為信息技術領域最新創(chuàng)新點的主要原因。

2、大數(shù)據(jù)處理:外包模式

國內(nèi)一些具有大數(shù)據(jù)的非互聯(lián)網(wǎng)公司也逐漸意識到了大數(shù)據(jù)能夠帶來的機遇。如上海的上廣電就是一個典型例子。他們通過安置機頂盒,在給電視觀看者提供數(shù)字內(nèi)容的同時,也獲得用戶觀看習慣的數(shù)據(jù)。同時,電視的位置也是可知的。基于這兩種數(shù)據(jù),就可以開發(fā)出一定種類的新的服務。

比如,基于客戶行為的個性廣告。如果某一家庭喜歡看少兒節(jié)目,廣告就可以推送與兒童有關的。再比如,基于客戶位置的信息推送。如果某用戶居處附近有商家在打折,電視就可以推送這些打折信息。還比如,基于群體行為的廣告定價。根據(jù)用戶的過往數(shù)據(jù),可以比較有把握地預測一部電視劇是否會火。

作為電視臺,上廣電(至少目前)并不具備大數(shù)據(jù)開發(fā)技能,但他們顯然也不愿意將他們的數(shù)據(jù)直接交給大數(shù)據(jù)處理公司。所以如果他們想要從機頂盒數(shù)據(jù)中開發(fā)新的服務,一定會選擇有能力的大數(shù)據(jù)專家或者公司上門服務。而他們根據(jù)計算結(jié)果進行應用即可。

3、大數(shù)據(jù)處理:中間商模式

在大規(guī)模爆發(fā)的大數(shù)據(jù)產(chǎn)業(yè)中,舍恩伯格認為,全新的數(shù)據(jù)中間商將橫空出現(xiàn)。他例舉了交通數(shù)據(jù)處理公司Inrix。這家公司位于美國西雅圖,它匯集了來自美洲和歐洲近1億輛汽車的實時交通數(shù)據(jù)。這些數(shù)據(jù)來自寶馬、福特、豐田等私家車,還有一些出租車和貨車等商用車。私家車主的移動電話也是數(shù)據(jù)的來源。一方面這家公司通過智能手機為用戶提供免費的交通信息,另一方面它也得到了這些車輛的同步數(shù)據(jù)。Inrix是典型的獨立運作的大數(shù)據(jù)中間商。每個汽車制造商可能都會利用自己的車輛在行駛過程中生成的成千上萬條數(shù)據(jù)來預測交通狀況,但這種預測不準確也不全面。但Inrix匯總了各家車廠車輛的數(shù)據(jù),隨著數(shù)據(jù)量的激增,預測結(jié)果越來越準確。

作為汽車制造商,各汽車公司并不一定掌握分析數(shù)據(jù)的技能,他們的強項是造車而不是路況分析。所以他們都很樂意第三方來做這一預測的工作,而且這些同行業(yè)的競爭者并不介意通過行業(yè)外的中間商來匯集他們各自手中的數(shù)據(jù)。

第三方的數(shù)據(jù)商出現(xiàn)固然是一種趨勢,但這只解決了公司愿意提供的那些數(shù)據(jù)的處理。事關商業(yè)競爭力的數(shù)據(jù)一般公司是不會交給第三方數(shù)據(jù)公司的。

4、面對更大的客戶需求,還有沒有別的模式?

大數(shù)據(jù)越來越“大”。媒體、交通、運輸、食品、醫(yī)療等領域,都有大量數(shù)據(jù)在持續(xù)積累當中。目前幾乎所有對大數(shù)據(jù)的定義,都包括了“海量”、“實時快速”、“多種類”這三種特點。在大小公司的數(shù)據(jù)開發(fā)成為規(guī)模后,大數(shù)據(jù)將呈井噴狀態(tài)。

根據(jù)IBM和牛津大學的合作報告《大數(shù)據(jù)在真實世界中的運用—創(chuàng)新型企業(yè)如何從不確定數(shù)據(jù)中提取價值》,2012年,在接受他們調(diào)研的1061家公司中,28%的公司開始試點和實施大數(shù)據(jù)戰(zhàn)略,47%的公司處于規(guī)劃階段而剩下24%則處于概念認識階段。他們的全球調(diào)研發(fā)現(xiàn),雖然大多數(shù)企業(yè)對大數(shù)據(jù)是為何物還不清晰,但是都表現(xiàn)出了越來越濃的興趣。未來越來越多的公司將意識到大數(shù)據(jù)的價值并尋找大數(shù)據(jù)技能和創(chuàng)新公司。不利用大數(shù)據(jù)的公司,很有可能被利用大數(shù)據(jù)的同行公司甩開。

可以預見,絕大多數(shù)公司都實行大數(shù)據(jù)戰(zhàn)略后,數(shù)據(jù)分析的要求要比現(xiàn)在大的多。這一方面將會刺激大數(shù)據(jù)技術處理公司的增長,同時也會刺激大量的數(shù)據(jù)中間商的出現(xiàn)。但是,應對越來越大的大數(shù)據(jù)處理需求,還有什么新的模式來嗎?

5、大數(shù)據(jù)處理的技術黑箱

大數(shù)據(jù)處理最主要的目標,就是將機器可讀的“數(shù)據(jù)”轉(zhuǎn)化為可以應用的“知識”。

無論是交給大數(shù)據(jù)技術處理公司,或者中間商,他們的工作內(nèi)容,都是將公司的“數(shù)據(jù)”轉(zhuǎn)化為可供利用的“知識”。而這個轉(zhuǎn)化過程,一則需要一定的技術,二則需要一系列的軟硬件。具體的轉(zhuǎn)化過程—大數(shù)據(jù)處理的技術黑箱。如下圖(由上海交大梁曉峣教授和朱其立教授聯(lián)合繪制)所示。

在目前熱炒的“大數(shù)據(jù)”概念中,其實對于不同企業(yè)意味著不同的意義。如,IBM、Intel等比較關注最底層的硬件層,oracle等則比較關注系統(tǒng)軟件層,百度、街旁等比較關注最上面的應用軟件層,現(xiàn)在最為大眾所知的也是最上面這一層,如facebook、新浪微博的廣告推送,騰訊的微信即時聊天服務等。

但是“知識工程層”,也就是,在硬件和系統(tǒng)架構(gòu)的基礎上,如何將“數(shù)據(jù)”轉(zhuǎn)化為“知識”,一直被當作是大數(shù)據(jù)公司內(nèi)部的技術能力,人們往往并不對其深入剖析。

6、一種新模式:大數(shù)據(jù)處理平臺模式

事實上,從“知識工程層”著手發(fā)展,是可以大有作為的。如果一個客戶,將其數(shù)據(jù)提供給一個大數(shù)據(jù)技術公司,該公司將其數(shù)據(jù)轉(zhuǎn)化為“知識”,就完成了一種業(yè)務。這也就是本文一開頭提到的第二種公司—大數(shù)據(jù)技術公司的業(yè)務流程。

如果,有多個客戶將數(shù)據(jù)傳給不同的數(shù)據(jù)技術公司,而這些公司同時在這一平臺作業(yè)。那么,各個數(shù)據(jù)處理公司不僅分別滿足了各自的客戶,同時平臺也匯集了各個客戶的數(shù)據(jù),進而有了將這些數(shù)據(jù)重組、混搭的機會。這種情況所能帶來的效益更是不可估量的。因為大數(shù)據(jù)處理,數(shù)據(jù)越“大”,創(chuàng)新的機會越多。而在處理各種數(shù)據(jù)的基礎上,平臺的技術能力和數(shù)據(jù)基礎也得到一步步加強。隨著領先者效應,有可能成為大數(shù)據(jù)時代的No.1企業(yè)。

所以,有沒有可能建立一個國有數(shù)據(jù)處理平臺?此平臺,可以處理各種客戶的數(shù)據(jù)處理需求。在滿足各種客戶自身需求的基礎上,還可以利用客戶的數(shù)據(jù)—在客戶同意的條件下—進行新的二次甚至三次開發(fā)利用。同時客戶也可以分得新一輪開發(fā)所創(chuàng)造的價值。

大數(shù)據(jù)帶動的在這一層級的產(chǎn)業(yè)需求,其下層的IBM、Intel、 oracle等以及其上層的facebook,百度等,由于“船大難掉頭”無法顧及。當然,即便他們想發(fā)展,也還面臨另兩個關鍵問題。一,第一桶數(shù)據(jù)哪里來?二,由于客戶眾多,數(shù)據(jù)必須有足夠的安全保障。

7、政府的作用:提供第一桶數(shù)據(jù)和控制平臺發(fā)展方向

最近幾年,政府數(shù)據(jù)開放運動(open data)在很多國家展開。這些國家公開政府數(shù)據(jù)的目的是為了刺激各種數(shù)據(jù)處理公司對政府的數(shù)據(jù)再利用從而創(chuàng)造新的價值。中國由于各種原因一直沒有加入此一行動,所以大部分的政府數(shù)據(jù)是處于擱置狀態(tài)的。

我們認為,在不公開政府數(shù)據(jù)的情況下,政府也可以成立一個國有的大數(shù)據(jù)處理平臺對政府自身的數(shù)據(jù)進行處理。這樣,既可以保證政府數(shù)據(jù)不發(fā)生外泄,同時也可以二次開發(fā)利用創(chuàng)造新價值。

而這一政府主導的平臺,也可以接受各個企業(yè)將其數(shù)據(jù)融入。企業(yè)出于對政府數(shù)據(jù)安全的信任,會愿意將自己的數(shù)據(jù)分享到政府的平臺。作為回報,企業(yè)可以得到該平臺基于各種類型數(shù)據(jù)所計算出的知識,提供的各種創(chuàng)新應用以及盈利的一部分。

當然還有另外一種可能,企業(yè)而不是政府建設這一平臺,但政府可以分享自己的一部分數(shù)據(jù)給以支持。通過這第一桶數(shù)據(jù),該平臺可以進一步吸收其他企業(yè)、社會數(shù)據(jù),并最終壯大。

8、待討論的問題

政府提供數(shù)據(jù)培養(yǎng)企業(yè),一定存在這樣一個問題:政府數(shù)據(jù)作為一種獨特的資源,政府應當提供給哪個企業(yè)?選擇企業(yè),無論是一家還是若干家,都是“選擇贏家”式的。這無疑會被認為是某種程度的政府“慈父主義”。歐美發(fā)達國家的處理方式,是將能夠公開的政府數(shù)據(jù)公開在互聯(lián)網(wǎng)上,任何企業(yè)或個人都可以開發(fā)利用。但是,在中國的背景下,一旦政府數(shù)據(jù)也通過互聯(lián)網(wǎng)公開,很有可能被國外發(fā)達數(shù)據(jù)公司搶先開發(fā)。如何平衡這兩者之間的矛盾,還需進一步研究。

參考文獻:

[1] [英] 維克托·邁爾·舍恩伯格(Viktor Mayer-Sch-nberger)肯尼思·庫克耶(Kenneth Cukier).大數(shù)據(jù)時代——生活、工作與思維的大變革[M].杭州:浙江人民出版社,2012.12

第5篇

大數(shù)據(jù)時代的到來,對整個世界都已經(jīng)產(chǎn)生了巨大影響,具體到軍隊檔案管理領域,大數(shù)據(jù)的功能作用以及其對檔案管理工作的影響則主要表現(xiàn)在以下幾點:一是分析判斷能力強,方便了電子文件的鑒定和索引。大數(shù)據(jù)時代,電子文件以指數(shù)級的速度增長,給電子文件的管理帶來了前所未有的挑戰(zhàn),雖然我們知道浩瀚的電子文件中蘊藏著巨大的“金礦”,但我們逐漸發(fā)現(xiàn)想要從這些電子文件中“淘金”比紙質(zhì)文件還困難。面對著巨量的電子文件,逐一閱讀每一份電子文件的原文恐怕實在是無能為力。而大數(shù)據(jù)技術的強大功能作用為上述問題的解決提供了有效的幫助。在普通的硬件上安裝大數(shù)據(jù)轉(zhuǎn)發(fā)器,就能收集數(shù)據(jù)形成的龐大的系統(tǒng)數(shù)據(jù),大數(shù)據(jù)軟件可以為機器生成的海量數(shù)據(jù)建立索引,將其整理成可以搜索的鏈接,這正是檔案工作迫切需要的技術。除此之外大數(shù)據(jù)技術還能完成數(shù)據(jù)的分類、數(shù)據(jù)的挖掘,從而使檔案管理擁有應對越來越復雜的數(shù)據(jù)的分析能力。二是處理技術手段高,解決了非結(jié)構(gòu)化數(shù)據(jù)的處理難題。大數(shù)據(jù)類型繁多,包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),至2012年末,非結(jié)構(gòu)化數(shù)據(jù)占有比例達到整個數(shù)據(jù)量的75%以上。面對著快速增長的非結(jié)構(gòu)化文件,檔案工作者在進行電子文件管理時困難重重,現(xiàn)在基于大數(shù)據(jù)技術的數(shù)據(jù)庫,如SQL已經(jīng)既可以做關系數(shù)據(jù),也可以做空間數(shù)據(jù)、圖像、數(shù)據(jù)流等非結(jié)構(gòu)化數(shù)據(jù),而且基于對象的存儲架構(gòu)可以在一個系統(tǒng)中管理十億級別的文件數(shù)量,還不會像傳統(tǒng)存儲一樣遭遇元數(shù)據(jù)管理的困擾,大數(shù)據(jù)技術為檔案工作者管理非結(jié)構(gòu)化電子文件的問題提供了解決之道。三是數(shù)據(jù)存儲容量大,避免了海量信息和數(shù)據(jù)的丟失。近年以來,在檔案數(shù)據(jù)庫的使用過程中,常常會碰到無法向數(shù)據(jù)庫中增加新的檔案數(shù)據(jù)的情況。要想安全地存儲巨量的檔案數(shù)據(jù),不可能一味的蓋大樓、蓋機房,這就要求我們必須優(yōu)化存儲、提高效率和節(jié)約成本,其實比起其他諸如電信行業(yè)、通信行業(yè)、電子商務等行業(yè)面臨的數(shù)據(jù)存儲空間問題,其實檔案行業(yè)的存儲空間問題只是小巫見大巫,大數(shù)據(jù)在計算機領域已經(jīng)具有相當?shù)某墒於龋@也說明大數(shù)據(jù)技術對于解決存儲海量數(shù)據(jù)問題的有用性,這些公司使用大數(shù)據(jù)的經(jīng)驗對檔案行業(yè)解決數(shù)據(jù)的存儲問題具有高度的借鑒意義。

2檔案管理運用大數(shù)據(jù)的策略

既然大數(shù)據(jù)時代已經(jīng)到來,而且其功能作用對部隊檔案管理工作有著較為深遠的影響,運用得當,大數(shù)據(jù)將給我軍檔案管理工作帶來前所未有的成功,那么如何將大數(shù)據(jù)的理念較好地運用到檔案管理工作中來呢?

2.1建立檔案資源管理中心

大數(shù)據(jù)技術支持龐大數(shù)據(jù)的存儲和處理,使檔案資源的統(tǒng)一管理成為可能。為了維護檔案的安全及對檔案資源的綜合掌控,檔案需要備份,目前檔案館采用的是檔案的電子備份,檔案部門是否可以在全軍范圍內(nèi)建立一個區(qū)域或者檔案備份中心,并且各部隊檔案部門能夠做到資源共享呢?只要通過嚴密驗證和科學規(guī)劃,這一措施是完全可行的。若全軍的檔案數(shù)據(jù)資源能集中起來,那么利用大數(shù)據(jù)進行檔案資源的管理、開發(fā)和利用將指日可待。

2.2培養(yǎng)大數(shù)據(jù)分析的專業(yè)人才

外界企業(yè)通過尋求和專門的大數(shù)據(jù)開發(fā)公司合作,較好的運用了大數(shù)據(jù)技術。而檔案管理牽扯到部隊保密工作,若想引入大數(shù)據(jù),又要有效防止信息數(shù)據(jù)的泄露,就必須加緊健全信息化檔案管理人才隊伍,花大力氣培養(yǎng)大數(shù)據(jù)分析的部隊專業(yè)技術人才,方能有效避免擁有大量數(shù)據(jù)卻不懂數(shù)據(jù)分析的尷尬。

2.3開發(fā)大數(shù)據(jù)分析工具

部隊檔案管理區(qū)別于地方,存在特殊性和敏感性。這就要求我們必須結(jié)合部隊實際及檔案建設的特點,開發(fā)出一套符合我們自己的大數(shù)據(jù)分析工具。

3檔案管理運用大數(shù)據(jù)應注意的事項

第6篇

【關鍵詞】實驗室建設 實驗室管理 大數(shù)據(jù) 計算資源管理

1 引言

隨著大數(shù)據(jù)應用的推廣,在教育領域上,大數(shù)據(jù)應用被用于分析學生的基礎信息數(shù)據(jù)、學習過程數(shù)據(jù)、學習行為數(shù)據(jù)、技能狀態(tài)數(shù)據(jù)和學習偏好數(shù)據(jù)等,借助相關的數(shù)據(jù)分析為教育活動、培養(yǎng)模式和教育決策提供合理的、有效的、科學的數(shù)據(jù)支撐。在大數(shù)據(jù)背景下,對高校實驗室的建設、管理及應用提出了更高的要求:

(1)實驗室建設應建設在具備計算資源的管理、數(shù)據(jù)存儲、數(shù)據(jù)采集能力的功能框架上;

(2)實驗室應能為各專業(yè)學生提供具備大數(shù)據(jù)實驗、大數(shù)據(jù)分析能力的計算資源及框架;

(3)實驗室平臺應具備產(chǎn)學研培養(yǎng)模式的服務能力。

以人才培養(yǎng)與學科研究/建設互動為原則,大數(shù)據(jù)背景下實驗室建設與學科發(fā)展、創(chuàng)新人才培養(yǎng)、師資技術培訓緊密結(jié)合,本文提出了基于項目管理和計算資源管理的計算機專業(yè)實驗室建設及管理的研究,并提出合理的解決方案,為推動教學和課程改革,推動教學模式和教學手段轉(zhuǎn)變,具備分析學生技能、學習行為及數(shù)據(jù)處理(數(shù)據(jù)采集、存儲、分析)能力,形成技能型、應用型人才培養(yǎng)模式創(chuàng)建一個良好的實驗教學環(huán)境。

2 大數(shù)據(jù)背景下計算機專業(yè)實驗室建設需求

在大數(shù)據(jù)背景下,隨著學校近年來專業(yè)數(shù)量的進一步擴大,增加的專業(yè)對實踐動手能力要求較高,為了達到更好的教學效果,現(xiàn)在的教學模式亟需發(fā)生變革,必須尋求一種更有效的實訓模式。結(jié)合計算機學科及專業(yè)實驗需求,實驗室的建設應具備前瞻性、擴展性、普適性的特征,專業(yè)實驗室的管理是管理員對計算資源進行運維的過程,體現(xiàn)了應用與理論相結(jié)合的需求。實驗室具備云計算、云服務及數(shù)據(jù)處理的能力,為培養(yǎng)新型技能型人才提供良好的實驗教學、實習實訓、對外服務的平臺及教學環(huán)境。在大數(shù)據(jù)背景下,計算機專業(yè)實驗室的建設及管理應從以下的幾個方面進行規(guī)劃及分析:

(1)針對計算機學科各專業(yè)的共同特征,在理論教學中各課程間是一個協(xié)同耦合的關系,以軟件開發(fā)過程為主線,將專業(yè)課程用規(guī)范的軟件項目過程模式應用到實踐教學管理中,將新的軟件開發(fā)模式、新的開發(fā)技術、新的業(yè)務流程快速地部署到實踐教學中并實施――該過程的實現(xiàn)對實驗室建設提出了專業(yè)實驗室中應具有基于項目管理平臺的能力。

(2)針對云計算、大數(shù)據(jù)應用的發(fā)展,為各專業(yè)學生提供個性化服務,實驗室應以虛擬計算資源的方式對各類用戶提供系統(tǒng)平臺服務、數(shù)據(jù)存儲及數(shù)據(jù)分析能力的計算節(jié)點:一方面通過實驗室平臺能方便快捷地管理硬件設施并以虛擬資源的形成呈現(xiàn)出來;另一方面所搭建的對計算資源進行管理的云計算平臺能為學生學習與計算資源管理相關的一系列課程的開設提供良好的軟件和硬件相結(jié)合的實驗環(huán)境。

(3)實驗室管理中應提供云服務平臺的管理模式,各類各層次及企業(yè)機構(gòu)用戶能按其在參與的項目中所擔任的角色參與項目信息的共享、項目開發(fā)過程的協(xié)同、任務的分發(fā)及監(jiān)督、討論等基于項目管理的活動,并可提供方便地按需進行系統(tǒng)環(huán)境的配置、開發(fā)平臺的部署等。

(4)提供知識庫管理功能,在課程上、在項目開發(fā)模版上、在開發(fā)素材上、在代碼復用上,為項目開發(fā)人員提供支撐的知識庫及歸檔服務。

(5)計算機專業(yè)實驗室的建設是一項既有硬件建設,又有軟件平臺建設的復雜工程,同時針對計算機專業(yè)的特點,實驗室是學生走向崗位的跳板和橋梁,其軟件平臺的建設應以產(chǎn)學研平臺為指導原則進行構(gòu)建。

結(jié)合計算機學科的發(fā)展,云計算技術類專業(yè)在教學過程中通過實驗室平臺依靠云計算技術的模擬實踐環(huán)境的構(gòu)建,將各行業(yè)實際的應用過程整合進來,把專業(yè)知識和實踐方法綜合與貫通起來,能更好地解決云計算技術類專業(yè)人才的培養(yǎng)和師資培訓的問題。

3 計算機專業(yè)實驗室建設方案及管理模式

3.1 實驗室建設方案的總體框架

針對高校的特點,實驗室建設的總體應用架構(gòu)的搭建及系統(tǒng)平臺的構(gòu)建遵循面向服務架構(gòu)(SOA)原則,具備安全性、集中性、高效性、高可靠性、開放性、可擴展性。實驗室的總體框架由軟件平臺和硬件設備整合而成,主要包含了:

(1)應用層――教學實驗實訓管理;

(2)云服務平臺層――云服務運維管理層;

(3)虛擬資源層――計算資源的虛擬化及管理;

(4)基礎設施層――服務器及網(wǎng)絡等物理設備。

方案的總體框架如圖1所示:

圖1中“計算資源管理平臺”主要負責以下的工作:

用戶管理:團隊用戶的申請、審批、權限、生產(chǎn)環(huán)境及計算資源的配置模板管理。

計算資源分配管理:針對用戶的需求,制作對應的軟件生產(chǎn)環(huán)境系統(tǒng)鏡像(配置生產(chǎn)環(huán)境、開發(fā)嘞薜齲,并為其分配相應的計算資源。

在線用戶管理:用戶VM的管理、計算資源的回收和分配;

基礎設施的管理:在基礎設施中添加、維護物理服務器的入群和退出等。

計算資源管理平臺是一個基于云計算應用的管理平臺,部署上主要采用一臺高性能服務器或與云服務平臺層的服務器(高性能服務器)捆綁在一起。

3.2 實驗室管理平臺――軟件項目管理平臺

為實現(xiàn)實驗室的高效管理,為實現(xiàn)產(chǎn)學研的實習實訓模式,實驗室管理和核心平臺――軟件項目管理平臺,平臺主要由三個子平臺構(gòu)成,其框架如圖2所示。

3.2.1 知識資源庫管理平臺

一方面為支持構(gòu)件(源碼庫、類庫),相關的文檔――需求說明書、開發(fā)計劃、設計說明書等,設計素材,測試用例,案例庫等各個項目研發(fā)過程性知識資源的復用,以提高項目研發(fā)的效率;另一方面為教育培訓提供各個方面的知識資源案例,為培養(yǎng)軟件研發(fā)人才提供詳細的項目過程管理規(guī)范、項目案例示范、編碼案例示范、文檔模板及文檔撰寫示范。

3.2.2 協(xié)同開發(fā)服務云端平臺

以協(xié)同軟件生產(chǎn)線為業(yè)務工作流(需求分析設計任務分解任務分發(fā)開發(fā)整合(單元測試)測試驗收),線上(云端)主要管理:任務分解、任務分發(fā)、開發(fā)、整合(單元驗收)、項目驗收五個過程,其它過程為線下管理。在平臺上,首先將需求與設計部分(線下由項目負責人、項目經(jīng)理完成――教師、學生、企業(yè)協(xié)同完成任務的設計及分配)產(chǎn)生的軟件設計說明書作為一個新的項目在平臺中進行注冊的初始化文檔導入系統(tǒng),線上部分主要有:組織級項目管理、項目生命周期管理、任務管理、測試管理、評審管理、外包管理、審查管理、知識和文檔管理等基于混合敏捷開發(fā)方法(即支持敏捷和傳統(tǒng)的項目管理)的標準和方法。

3.2.3 協(xié)同開發(fā)桌面云

將桌面計算機的計算和存儲資源(包括CPU、硬盤、內(nèi)存)集中部署在云計算數(shù)據(jù)中心機房,通過虛擬化技術將物理資源轉(zhuǎn)化為虛擬資源,并按需向用戶提供虛擬桌面服務。實現(xiàn)完整的水平整合和云化企業(yè)異構(gòu)IT基礎設施的能力,能夠支持數(shù)據(jù)中心虛擬化或桌面虛擬化構(gòu)筑云計算基礎架構(gòu)和運營模式,實現(xiàn)固定和移動融合的云接入能力,幫助學生跨學院/跨區(qū)域?qū)椖块_發(fā)環(huán)境下的桌面、應用和數(shù)據(jù)進行統(tǒng)一管理、和聚合,提升軟件項目研發(fā)過程的信息安全及技術保密。

該平臺基于項目過程建立一個以流程導向、以軟件項目為中心的實驗室運維支撐平臺,為整個云實驗室提供一套行之有效的運維管理體系。

3.3 實驗室管理的內(nèi)容

3.3.1 實驗教學管理模式

按照“三位一體”原則,主要由實驗室管理員、課程教師、學生、企業(yè)機構(gòu)四個角色,為云計算教學實踐和實驗提供一個統(tǒng)一的管理服務模式,在管理平臺中完成實驗資源調(diào)度管理、教學資源管理、實訓課程管理、實驗軟件管理、實驗考核管理、用戶管理、權限管理及其他個性化設置管理等。

3.3.2 實驗課程管理

按照計算機學科各專業(yè)將課程理論和云實驗課程兩部分組成,涵蓋基礎原理、核心技術、平臺實踐、應用案例等。

最終用戶通過網(wǎng)絡,使用各種PC瀏覽器或移動終端設備接入實驗教學管理門戶,通過統(tǒng)一身份認證、訪問控制等安全策略控制后,使用云實驗室各種虛擬云資源及學校云實驗課程,為最終用戶提供云計算教學和體驗。

4 計算機專業(yè)實驗室實施架構(gòu)及基礎業(yè)務流程

解決方案實施架構(gòu)及基礎業(yè)務流程如圖3所示。

為了降低實驗室的維護成本,提高信息安全管理力度,采用“云端集中化”模式,通過云桌面技術將學生個性化桌面集中部署在服務器上,不同設備可以隨意訪問,同時實現(xiàn)桌面維護簡單化、業(yè)務數(shù)據(jù)集中化。具備:

(1)穩(wěn)定、節(jié)能;

(2)少故障、易維護;

(3)模板式桌面部署,系統(tǒng)安裝、軟件分發(fā)、環(huán)境設置、故障恢復等工作可以一鍵下發(fā),減少運維工作量;

(4)移動化、更靈活提升辦公效率;

(5)安全、易備份,業(yè)務數(shù)據(jù)集中存儲,形成分布式共享數(shù)據(jù)存儲,提供經(jīng)濟高效的存儲。

5 結(jié)束語

在大數(shù)據(jù)背景下,高等教育的實驗室建設及配套的管理平臺應具備高開放性和可擴展性,一方面形成高效的實驗室管理模式的配套工具;另一方面能為培養(yǎng)計算機專業(yè)提供與研究熱點相關的實驗環(huán)境。

參考文獻

[1]陳雷.大數(shù)據(jù)學習分析的研究與應用――以浙江省教師教育MOOC培訓平臺的課程為例[J].現(xiàn)代教育技術,2016,26(08):109-115.

[2]張艷艷,韓濤,高秀芝,等.基于大數(shù)據(jù)時代背景下的實驗室管理改革方向[J].教育教學論壇,2016(05):219-220.

[3]毋妙麗,段曉英.基于云桌面的虛擬實驗室建設及應用[J].中國現(xiàn)代教育裝備,2016(23):10-12.

[4]王娟 高等院校專業(yè)實驗室建設與管理探析[J].中國輕工教育,2016(01):64-66.

[5]歐躍發(fā),黃文明.基于云計算的虛M實驗系統(tǒng)的設計及應用[J].電腦知識與技術,2016(08):097.

[6]劉世偉,田世鵬,甘濤,等.虛擬實驗室的研究與應用現(xiàn)狀綜述[J].物聯(lián)網(wǎng)技術,2016,6(09):82-83.

作者簡介

莫瀟曉(1981-),男,廣東省肇慶市人?,F(xiàn)為肇慶學院教育技術與計算機中心助理實驗師。研究方向為實驗室管理、虛擬實驗室、云計算。

第7篇

一、“互聯(lián)網(wǎng)+”的重要標志:大數(shù)據(jù)時代

“互聯(lián)網(wǎng)+”行動計劃日益滲透到各行各業(yè),它代表著時展方向,對人力資源管理帶來了創(chuàng)新變革。隨著科學技術水平的不斷提高,大數(shù)據(jù)應用已經(jīng)在各行各業(yè)中體現(xiàn)出不可替代的價值,形成了“大數(shù)據(jù)+人力資源管理”的管理思維方式。大數(shù)據(jù)應用的出現(xiàn)意味著數(shù)據(jù)能夠廣泛滲透到各行各業(yè)及各個業(yè)務職能領域中;同時海量數(shù)據(jù)的應用掀起了新一輪的消費者盈余浪潮,并使得生產(chǎn)率有所增長。隨著互聯(lián)網(wǎng)及云計算等科技的興起及普遍使用,大數(shù)據(jù)作為新時代的產(chǎn)物,在越來越多、越來越復雜的海量數(shù)據(jù)下成功塑造出這一全新的概念。

大數(shù)據(jù)的主要特征有數(shù)據(jù)體量巨大、數(shù)據(jù)類型繁多、價值密度低和處理速度快。大數(shù)據(jù)作為海量數(shù)據(jù)的集合體,存在三種分類方式:(1)半結(jié)構(gòu)化數(shù)據(jù)。例如用windows系統(tǒng)進行處理的文字、電子郵件及在網(wǎng)上閱覽的新聞等信息。(2)結(jié)構(gòu)化數(shù)據(jù)。例如企業(yè)財務系統(tǒng)、人事系統(tǒng)等數(shù)據(jù)都是結(jié)構(gòu)化的數(shù)據(jù)。(3)非結(jié)構(gòu)化數(shù)據(jù)。例如移動終端、傳感器及社交網(wǎng)絡等產(chǎn)生的數(shù)據(jù)。大數(shù)據(jù)時代給人力資源管理帶來了新的思維和機遇,以大數(shù)據(jù)的思維模式,整合各類數(shù)據(jù),挖掘數(shù)據(jù)價值。因此,“大數(shù)據(jù)+人力資源管理”必定是人力資源管理的發(fā)展趨勢

二、大數(shù)據(jù)應用在人力資源管理中的作用

1.大數(shù)據(jù)應用使數(shù)據(jù)具有廣泛的可獲取性及高透明度。部分制造商正在試圖通過集成多種系統(tǒng)的數(shù)據(jù),并試圖通過從客戶和外部供應商獲取數(shù)據(jù)來共同完成產(chǎn)品的制造。例如汽車制造行業(yè),汽車的零部件通過全球供應商集中提供。企業(yè)及其供應鏈合作伙伴通過這種高度集成的平臺可以在產(chǎn)品的初期設計階段就開始相互協(xié)調(diào)工作。

2.大數(shù)據(jù)通過改變決策的制定方式對競爭產(chǎn)生影響。大數(shù)據(jù)應用能夠使決策制定產(chǎn)生根本性的轉(zhuǎn)變。大數(shù)據(jù)可以通過利用可控實驗,使企業(yè)能夠?qū)僭O進行驗證,并對數(shù)據(jù)顯示的結(jié)果進行分析,從而達到利用大數(shù)據(jù)指導投資決策及運作方式的目的。大數(shù)據(jù)應用對面向用戶的企業(yè)有著極其重要的影響作用,面向用戶的企業(yè)通過對數(shù)據(jù)的分析和劃分來對用戶進行定位,而大數(shù)據(jù)應用可以使用戶質(zhì)量實現(xiàn)質(zhì)的飛躍,使用戶的實時性及個性化制定成為現(xiàn)實。新一代的零售商已經(jīng)采取利用大數(shù)據(jù)應用,并且通過互聯(lián)網(wǎng)的點擊量對用戶進行定位和跟蹤,同時能夠影響并更新用戶的個人愛好,通過實時模仿其可能發(fā)生的行為對自己的產(chǎn)品進行改進和完善。

3.大數(shù)據(jù)對數(shù)據(jù)管理所做的改變及替代趨勢。大數(shù)據(jù)應用通過提高機器的分析能力及算法,能夠使制造商獲得更高的生產(chǎn)率。例如部分制造商利用大數(shù)據(jù)算法對生產(chǎn)線的傳感數(shù)據(jù)進行分析,為減少及避免損失創(chuàng)建自動調(diào)節(jié)過程,以達到減少成本過高的人工干預并實現(xiàn)生產(chǎn)率的提高。

4.基于大數(shù)據(jù)應用的新型商業(yè)模式產(chǎn)生。大數(shù)據(jù)的廣泛應用促使許多在價值鏈中生存的新型公司產(chǎn)生,通過商業(yè)交易創(chuàng)建具有高價值的“排出數(shù)據(jù)”,這種商業(yè)模式已被大量新型公司采用[1]。

三、大數(shù)據(jù)應用在人力資源管理中的價值

大數(shù)據(jù)應用使得人力資源管理系統(tǒng)的數(shù)據(jù)來源得到拓寬,并使人力資源的信息采集能力得到提升,使數(shù)據(jù)量最大化。大數(shù)據(jù)應用對人力資源管理的精確性、客觀性及針對性都有十分重要的作用。

大數(shù)據(jù)應用為人事工作提供更加全面的量化參考基礎。在組織人事工作的過程中,利用大數(shù)據(jù)的分析方式可以對人員流動、績效考核結(jié)果及人員培訓需求等進行有效分析。利用大數(shù)據(jù)的優(yōu)勢結(jié)合全面的人力資源信息并對其進行反復持續(xù)地深入挖掘,利用人才分析或人力資源核算等方法,使大數(shù)據(jù)為人力資源管理工作發(fā)揮出戰(zhàn)略性的預判能力。

在大數(shù)據(jù)時代下,人力資源管理系統(tǒng)已經(jīng)打破了傳統(tǒng)的組織形式并開始向普通員工靠近,從而在與員工交流的過程中產(chǎn)生更多的交互性數(shù)據(jù),這樣不僅可以優(yōu)化人力資源的組織結(jié)構(gòu),同時為員工服務創(chuàng)造出有利的條件,使員工能積極參加到認識管理工作中,并且使人力資源管理有更加規(guī)范的工作流程。

人才的核心競爭力在大數(shù)據(jù)時代下正發(fā)生著巨大的變化,利用大數(shù)據(jù)可以建立高效的人才數(shù)據(jù)管理模式。在大數(shù)據(jù)新時代下數(shù)據(jù)已成為企業(yè)的核心資產(chǎn)之一。通過對大數(shù)據(jù)應用的使用使得企業(yè)的一切信息都能夠被錄入和存儲,并且通過對企業(yè)及員工群體的信息進行有效分析和總結(jié)。

四、大數(shù)據(jù)下人力資源共享網(wǎng)絡的組織模式設計

1.人力資源共享網(wǎng)絡的構(gòu)建框架。人力資源共享網(wǎng)絡的構(gòu)建包括以下四個部分:確定共享網(wǎng)絡的目標、選擇共享伙伴、組織共享網(wǎng)絡結(jié)構(gòu)和共享網(wǎng)絡的運行及反饋與平臺的設計開發(fā)。其中選擇共享伙伴與構(gòu)建共享網(wǎng)絡平臺的設計開發(fā)是人力資源共享網(wǎng)絡建設的核心部分,因此,對二者進行深入分析[2]。

2.人力資源共享網(wǎng)絡的伙伴選擇。在人力資源共享網(wǎng)絡的建設過程中,共享網(wǎng)絡的伙伴可能是任何行業(yè)的人員或企業(yè),因此,在選擇過程中,通過對人力資源狀況進行識別與評估,對候選共享伙伴進行初步確定,同時在此基礎上根據(jù)海量信息及經(jīng)驗制定合理的共享伙伴評價體系與指標,從多方面對伙伴進行綜合性的評價,最終確定合適的共享伙伴名單。影響人力資源共享網(wǎng)絡選擇共享伙伴的因素有很多,根據(jù)不同的人力資源情況會出現(xiàn)不同的選擇側(cè)重點,在選擇過程中應根據(jù)共享網(wǎng)絡的建設目的及各組織進行合作的宗旨,從而確定對共享伙伴選擇中的評價體系。

3.人力資源共享網(wǎng)絡的平臺設計及組織結(jié)構(gòu)。在確定網(wǎng)絡共享伙伴之后,開始對網(wǎng)絡組織進行詳細設計,其中包括網(wǎng)絡共享平臺的設計及組織結(jié)構(gòu)設計:(1)人力資源共享網(wǎng)絡組織結(jié)構(gòu)。在人力資源共享網(wǎng)絡組織的運行過程中,應建立各項功能機構(gòu)并且執(zhí)行網(wǎng)絡共享合作協(xié)議,使共享成員組織之間能夠有效而具體地開展人力資源共享活動。人力資源網(wǎng)絡共享組織一般具有兩個層次的功能機構(gòu):一是從微觀上根據(jù)具體的人力資源網(wǎng)絡共享需求及合作項目、目標組建人力資源網(wǎng)絡共享合作團隊,并且形成人力資源共享體系,運用不同的網(wǎng)絡共享方式實現(xiàn)需求者與人力資源擁有者之間的網(wǎng)絡共享;二是從宏觀的層次上建立由共享成員組織共同參與的高層管理機構(gòu),對整個人力資源網(wǎng)絡共享組織內(nèi)部的工作負責并進行協(xié)調(diào)[3]。(2)人力資源網(wǎng)絡共享平臺的設計開發(fā)。人力資源網(wǎng)絡共享的平臺設計開發(fā)工作主要有以下幾個環(huán)節(jié):利用網(wǎng)絡服務器將人力資源擁有的能夠進行編碼的知識及每個成員組織提供的相應人力資源信息進行傳遞;通過網(wǎng)絡共享平臺的各個內(nèi)部子系統(tǒng)的運作,對人力資源編碼化的知識進行處理加工并且對共享成員間人力資源的需求進行匹配;最后通過網(wǎng)絡或人工傳輸,對每個網(wǎng)絡共享團隊的實踐活動進行指導。人力資源共享網(wǎng)絡平臺由以上各環(huán)節(jié)共同構(gòu)成。

五、大數(shù)據(jù)下人力資源網(wǎng)絡的協(xié)調(diào)機制

人力資源網(wǎng)絡共享平臺的開發(fā)設計作為共享成員之間進行人力資源及知識共享的基礎平臺環(huán)境,還需要能夠支持整個網(wǎng)絡共享組織運行的協(xié)調(diào)機制,通過與協(xié)調(diào)機制的配合才能夠使得共享網(wǎng)絡組織的運行目標得到實現(xiàn)。

協(xié)調(diào)機制在人力資源網(wǎng)絡共享組織中主要強調(diào)以下幾點:配合并協(xié)調(diào)人力資源網(wǎng)絡共享平臺的運作過程;通過網(wǎng)絡共享文化培養(yǎng)及激勵機制等方式對各共享成員組織間的合作關系進行協(xié)調(diào),達到使每個共享成員都能夠以有效的目標優(yōu)化方式與其他成員合作共同達成目的。協(xié)調(diào)機制主要包括網(wǎng)絡目標分解、網(wǎng)絡組織結(jié)構(gòu)及具體執(zhí)行等層次的內(nèi)容。

因此,人力資源網(wǎng)絡共享組織的協(xié)調(diào)機制主要在向前協(xié)調(diào)及向后協(xié)調(diào)兩個方面進行作用[4]。

1.人力資源共享網(wǎng)絡組織協(xié)調(diào)機制的向前協(xié)調(diào)作用。人力資源網(wǎng)絡共享組織的向前協(xié)調(diào)主要強調(diào)根據(jù)各共享成員的差異在共享網(wǎng)絡組織構(gòu)建過程中預先設計合理的協(xié)調(diào)機制,以達到協(xié)調(diào)管理各共享成員組織與人力資源網(wǎng)絡共享整體運作的關系。

2.人力資源共享網(wǎng)絡組織協(xié)調(diào)機制的向后協(xié)調(diào)作用。人力資源網(wǎng)絡共享的向后協(xié)調(diào)機制主要包括發(fā)現(xiàn)、分析及解決問題三個部分。協(xié)調(diào)機制在人力資源網(wǎng)絡共享組織中主要著手解決在共享網(wǎng)絡運行中已經(jīng)存在的沖突或問題。作為一種反饋模式被動地對事后出現(xiàn)的問題進行解決。

在人力資源網(wǎng)絡共享組織的運行過程中存在大量需要處理的共享伙伴之間的制約及依賴關系,因此,全面、正確地對其進行形式化描述并對整個運行過程進行有效的維持,從而減少共享成員組織間出現(xiàn)沖突的情況以降低協(xié)調(diào)工作量。

第8篇

“大數(shù)據(jù)時代的預言家”維克托近日在北京面對一萬多名技術信徒再次預言。

顯然,這三大經(jīng)典的技術信條在大數(shù)據(jù)時代面臨動搖,

技術信徒的思維模式也即將發(fā)生顛覆。

那么,大數(shù)據(jù)對技術信徒意味著什么?

他們又將如何面對這一顛覆性的變革?

“技術匯成一條大河,一波推動另外一波?!盜BM中國開發(fā)中心首席技術官兼新技術研發(fā)中心總經(jīng)理毛新生帶著對技術的滿腔癡迷這樣形容道。

一波未平一波又起,移動、社交商務、云計算、大數(shù)據(jù)等先后涌現(xiàn)的新趨勢正在融合成一股巨大的潮流,將所有的行業(yè)IT化,進而推動商業(yè)和社會的演進。這也就意味著“科技是第一生產(chǎn)力”在當下有了更深層次的涵義——“IBM認為,在由新一代技術組成的智慧運算時代,中國的企業(yè)家們需要更為戰(zhàn)略地思考信息科技的定位,將其運用到自身的變革轉(zhuǎn)型之中?!?IBM全球副總裁兼大中華區(qū)軟件集團總經(jīng)理胡世忠為企業(yè)新發(fā)展出謀獻策。

由2012年的“軟件技術峰會”改名為2013年的“技術峰會”,在這么一個盛會上,IBM試圖展示的內(nèi)容涵蓋范圍更為廣泛——移動應用、大數(shù)據(jù)、云計算、DevOps軟件持續(xù)交付、應用整合、社交商務、專家集成系統(tǒng)等熱議話題,上百場技術主題演講、28場分論壇、22場動手實驗室和80個未來產(chǎn)品的現(xiàn)場演示,再加上被譽為“大數(shù)據(jù)時代的預言家”的《大數(shù)據(jù)時代》作者維克托·邁爾-舍恩伯格以及數(shù)十位來自IBM的院士、杰出工程師、相關領域的全球首席技術官和首席架構(gòu)師的現(xiàn)場分享,IBM 2013技術峰會再次成為技術精英們關注的焦點。 大數(shù)據(jù)的新信條

《大數(shù)據(jù)時代》作者、牛津大學網(wǎng)絡學院互聯(lián)網(wǎng)治理與監(jiān)管專業(yè)教授維克托·邁爾-舍恩伯格的出現(xiàn)著實讓場內(nèi)數(shù)以萬計的技術信徒激動了一把。作為深刻洞察大數(shù)據(jù)給人類生活、工作和思維帶來的大變革的第一人,維克托以價格預測網(wǎng)站的例子作為開場白,論證了大數(shù)據(jù)已經(jīng)悄然在大眾的身邊出現(xiàn)并給他們的生活帶來改變。

“全體性、混雜性和相關性是大數(shù)據(jù)的三個主要特點,而且這三個特點是互相加強的?!本S克托歸納出了大數(shù)據(jù)對應的思維變革。收集和分析更多的數(shù)據(jù)才能獲取足夠的數(shù)據(jù)隱含的細節(jié),這些細節(jié)恰恰是隨機抽樣所錯失的。“干凈”的、高質(zhì)量的數(shù)據(jù)不再是標的,大數(shù)據(jù)需要我們摒棄對宏觀上精確性的追求,轉(zhuǎn)而獲得微觀上的準確性,即接受混雜的數(shù)據(jù)。最重要的是,人們不再沉迷于追尋數(shù)據(jù)之間的因果關系,即不再糾結(jié)于為什么,而是直接獲得“是什么”的答案,并通過應用相關關系,更好地捕捉現(xiàn)在和預測未來——抽樣因錯失細節(jié)得不償失,盲目追求精確性已經(jīng)過時,執(zhí)著于因果關系喪失機遇。

如何在大數(shù)據(jù)時代生存?維克托指出了兩個關鍵點:一是意識到技術或者規(guī)模并不是成功的充分條件。遺忘規(guī)模經(jīng)濟,因為它的效益會逐漸淡化。20年前,一個公司只有擁有上十萬臺的服務器才能提供搜索服務,但在大數(shù)據(jù)時代,由于云計算的便利性,不擁有實體服務器的公司,如前文提到的,它只有30個員工,但它有能力為其上10億的用戶提供數(shù)據(jù)分析。二是為了在大數(shù)據(jù)時代獲得勝利,大數(shù)據(jù)的思維模式不可或缺,工具的力量不容小視,分析能力是必要的。藍色被谷歌選為搜索窗口的色彩,但藍色實際上有51種,而且這51種藍色人依靠裸眼無法明確區(qū)分,卻能在心理層面給人帶來不同的感受。經(jīng)過大數(shù)據(jù)分析,谷歌發(fā)現(xiàn)原本由人工選出來的藍色會導致谷歌損失200億~300億美元的收入,因為這一種藍色并不最具備誘惑力,無法激起人們點擊的欲望。

大數(shù)據(jù)的力量需要具備大數(shù)據(jù)的思維模式,并有效利用大數(shù)據(jù)的工具去發(fā)掘。IBM杰出工程師、InfoSphere Stream高級開發(fā)經(jīng)理James R Giles闡述了IBM對大數(shù)據(jù)的看法:“我們正一步步走到了一個新紀元——大數(shù)據(jù)時代。如同對待自然資源一樣,我們需要開掘、轉(zhuǎn)變、銷售、保護大數(shù)據(jù)資源;不同的是,大數(shù)據(jù)資源是無窮無盡的,我們不能任由大數(shù)據(jù)淹沒自己,而應該在獲得洞察需求的驅(qū)使下獲得價值?!?/p>

大數(shù)據(jù)的類型廣義而言有移動數(shù)據(jù)和靜態(tài)數(shù)據(jù),還有結(jié)構(gòu)性數(shù)據(jù)和非結(jié)構(gòu)性數(shù)據(jù),這對應著不同的處理方式?!凹夹g人員的責任是,能夠去管理這些數(shù)據(jù),能夠理解這些從不同的數(shù)據(jù)源而來、不同類型的數(shù)據(jù),能夠分析這些數(shù)據(jù),得出結(jié)論,讓其提供決策支持,為企業(yè)擁抱新的大數(shù)據(jù)時代提供技術支撐,以保證管理、安全、商業(yè)的持續(xù)性?!?James R Giles號召技術人員積極行動,以大數(shù)據(jù)的思維模式展現(xiàn)技術的價值和魅力。

找到內(nèi)在聯(lián)系

技術的趨勢總是融合,也只有有機融合才能形成合力,發(fā)揮更大的威力,而實現(xiàn)這一合力的前提是明確各個趨勢之間的內(nèi)在聯(lián)系。

“實際上,社交商務、移動、大數(shù)據(jù)、云計算是一體化的?!泵律ㄗh技術人員用一個全面的、融合的范式來沉著看待和應對紛繁的熱點技術,理解這些熱點會如何影響整個IT的走向,進而明晰IT如何可以很好地支持各行各業(yè)的業(yè)務轉(zhuǎn)型和創(chuàng)新,“讓每個行業(yè)都可以從新的技術轉(zhuǎn)型當中獲得足夠的原動力”。

從貼近最終用戶的角度來看,移動技術、社交技術改變了商業(yè)機構(gòu)與其雇員、客戶進行互動的方式?!熬臀覀€人的經(jīng)歷而言,航空公司的移動應用可以提供更好的客戶交互。我是西北航空公司的粉絲,因為它家的移動應用服務很貼心,比如查詢航班信息、根據(jù)我的喜好預留位置、定制化地進行社交推薦等。”毛新生以一個普通消費者的感受證明了企業(yè)通過移動應用收集并利用用戶行為數(shù)據(jù)所帶來的服務質(zhì)量的提升。

移動催生了“一種嶄新的服務交付端點”,即為用戶提供了更多樣化的服務體驗點,讓用戶隨時隨地可以利用碎片化的時間去獲得業(yè)務服務,也為企業(yè)帶來了全新的服務交付渠道。移動這個渠道提供了更為豐富的全樣性數(shù)據(jù),在此基礎上,大數(shù)據(jù)分析就更可信。“移動所具備的碎片化特點會帶來更大量的用戶行為信息。當把所有的人的行為結(jié)合在一起,就可以做群體的社會性分析。社會性分析會得到比較準確的群體特征。而群體特征足以獲得很好的交叉銷售與線上銷售機會?!泵律J為移動與大數(shù)據(jù)結(jié)合給企業(yè)提供了新的商業(yè)機會。

移動的設備無處不在。人、汽車,甚至建筑物、道路、橋梁,它們無時無刻不在提供數(shù)據(jù),這就是新的數(shù)據(jù)源,是它們引領我們來到維克托所描述的更為廣闊的大數(shù)據(jù)世界。

移動和社交商務的便捷性使得企業(yè)的整個業(yè)務流程變得非常自動化,用戶可以享受自助服務,對應到企業(yè)端就意味著業(yè)務流程對前端的需求要反應得更為迅速,也意味著各個業(yè)務系統(tǒng)之間無縫連接,否則沒有辦法支撐以最終用戶為中心的服務體驗,但跨部門和跨應用的整合實屬不易。進一步延伸開來,對用戶體驗的追求是無止境的,合作伙伴的API和服務可以作為補充,這即是“跨企業(yè)邊界”的行為。這種行為必然導致大規(guī)模的用戶訪問。這些整合和外部拓展都需要云計算提供靈活有效的基礎。沒有云計算,移動前端的體驗、大數(shù)據(jù)分析的效果都會大打折扣?!霸频幕A設施使大規(guī)?;?、大規(guī)模數(shù)據(jù)處理、大規(guī)模應用可以更好地服務我們?!泵律赋?。

環(huán)境變化加速,競爭更加激烈,要求企業(yè)的反應速度越來越快,應用以及端到端解決方案快速改變。毛新生饒有興致地介紹道:“這個改變有多快呢?我們有的客戶嘗試以天為周期去改變,這意味著應用和業(yè)務流程的設計、開發(fā)、部署、測試、維護的整個過程要大大加快,也就是所謂的DevOps。只有把敏捷的開發(fā)和運維結(jié)合起來,生命周期變得以天為周期,才能響應新的商業(yè)環(huán)境。”

“移動、云計算、大數(shù)據(jù)、社交商務之間的緊密聯(lián)系讓我們應該以整體的眼光來審視它們。”胡世忠堅信,它們的組合可以創(chuàng)造可持續(xù)的競爭優(yōu)勢,可以迸發(fā)變革的力量。

至于一個企業(yè)應該從哪里下手來實現(xiàn)這一幅宏偉藍圖?毛新生給出的答案是:“每一個企業(yè),因為它所處的行業(yè)或者特定的情況而擁有不同的切入點,有一些企業(yè)需要從移動開始,有一些企業(yè)需要從云計算開始,有一些企業(yè)需要從大數(shù)據(jù)開始,但是它們是不可分割的整體,只有綜合地運用它們,找到適合自己的切入點,一步一步腳踏實地,才能掌握先機,打造競爭力。在這個過程中,要擁有正確的思維,改變既有思維,理解趨勢,制定策略?!?/p>

例如,銀行、保險、零售業(yè)這一類和最終消費者打交道的服務業(yè)在很大概率上需要先從移動、社交商務入手,從而使其有機會改善和用戶交互的過程。而以數(shù)據(jù)為生的行業(yè)會琢磨如何將自己的內(nèi)容和資源數(shù)據(jù)增值,而傳統(tǒng)的運營基礎設施的重資產(chǎn)企業(yè),會追求將資產(chǎn)數(shù)字化,得到數(shù)據(jù)并進行分析,以優(yōu)化資產(chǎn)的生命周期管理來預防性地降低維護成本,這些企業(yè)是以大數(shù)據(jù)作為切入點的。還有一些企業(yè)希望跨行業(yè)整合進行業(yè)務創(chuàng)新,背后牽扯到它們自身現(xiàn)有的業(yè)務模式和新業(yè)務模式的整合,這種情況下需要以云的方式構(gòu)建新的應用、服務、商業(yè)流程。

毛新生認為切入點不同只是表象,每一種場景到最后都是綜合性的運用,要把這幾個技術綜合運用起來。從前端開始,首先是利用移動,并借助社交渠道交流,很快這些渠道會得到新的數(shù)據(jù),這些新的數(shù)據(jù)和原有的交易數(shù)據(jù)和積累的數(shù)據(jù)結(jié)合起來做進一步的數(shù)據(jù)分析,這就是大數(shù)據(jù)分析。大數(shù)據(jù)分析以后可以做社交推薦、關聯(lián)推薦了。隨后,能不能跨界再實現(xiàn)更廣泛的銷售?跟別的價值鏈上的合作伙伴合作,那么引入云是解決之道。數(shù)據(jù)量增大,用戶數(shù)增多,云的基礎設施可以讓成本更合理?!八哉f,到最后都是綜合性的應用,盡管起點不一樣”,毛新生說。

對技術人員而言,IT就是交付業(yè)務流程的基礎,是信息化的工具。它的目標無非是優(yōu)化業(yè)務流程或者創(chuàng)新業(yè)務流程。創(chuàng)新到達一定程度后,業(yè)務流程的量變會導致質(zhì)變?!斑@就解釋了為何全球越來越多的CEO將技術視為驅(qū)動企業(yè)發(fā)展的首要因素?!?IBM軟件集團大中華區(qū)中間件集團總經(jīng)理李紅焰強調(diào),技術人員有能力,也有責任將“看不見的技術轉(zhuǎn)變?yōu)榭吹靡姷南硎堋薄?/p>

移動開發(fā)的轉(zhuǎn)變

在大數(shù)據(jù)的帶領下我們進入移動時代,企業(yè)有了新機遇,技術人員卻有了新挑戰(zhàn)。為什么移動開發(fā)和之前不一樣呢?有什么不一樣呢?這成為了縈繞在技術人員腦子里最主要的兩個問題。

IBM杰出工程師及IBM移動平臺首席架構(gòu)師Greg Truty解答了這兩個疑問。他認為,很多企業(yè)現(xiàn)在所做的事情與在移動的狀態(tài)下做的事情是不一樣的,移動狀態(tài)下的任務和規(guī)劃更具有戰(zhàn)略性。移動應用是在不穩(wěn)定的網(wǎng)絡上運行的,所占用的資源更少。用戶在移動設備上和非移動設備上的體驗是完全不一樣的,他們會希望在不穩(wěn)定的網(wǎng)絡上仍然能夠獲得良好的體驗。企業(yè)現(xiàn)在需要思考的是,怎么樣把大量數(shù)據(jù)、大量體驗變成一些有意義的體驗。同時,移動管理的需求也不一樣了,開發(fā)的特性也不一樣了。比如對一個企業(yè)來說,移動開發(fā)周期更短,有更多設備需要支持,有更多開發(fā)方法可供選擇,也有更多的工具和庫可供選擇,這時候企業(yè)就需要仔細斟酌,哪些開發(fā)方法和工具是自己需要的。

自然而然,對于設備的管理也有了變化,因為應用變化了?!耙恢币詠?,客戶端服務器的應用架構(gòu)是企業(yè)在使用的。你需要協(xié)調(diào)在服務器端的服務以及在客戶端的服務,挑戰(zhàn)非常大。你不可能強迫客戶運行你的應用,而必須能協(xié)調(diào)和兼容原有的系統(tǒng)。這是非常關鍵的一點?!?Greg Truty強調(diào)了設備管理的重要性。

此外,產(chǎn)品種類也非常多,新應用層出不窮。Greg Truty 認為多而新的局面下更需要冷靜處理:“我們會把應用和數(shù)據(jù)結(jié)合起來,移動和社交網(wǎng)絡結(jié)合起來,這樣做會創(chuàng)造一些新的得到數(shù)據(jù)的機會,需要進行管理。新的機會、新的技術,給整個IT組織帶來了更多的挑戰(zhàn)?!?/p>

第9篇

關鍵詞:網(wǎng)絡大數(shù)據(jù) 特點 統(tǒng)計 分析利用

中圖分類號:TP309 文獻標識碼:A 文章編號:1007-9416(2016)11-0237-01

大數(shù)據(jù)信息種類繁多,不僅包含了大量的結(jié)構(gòu)化數(shù)據(jù),還包含大量的非結(jié)構(gòu)化數(shù)據(jù),對這些數(shù)據(jù)的統(tǒng)計和整理是一項較為復雜的工作,必須先將非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換為結(jié)構(gòu)化數(shù)據(jù),可是由于當前信息數(shù)據(jù)的統(tǒng)計標準還不統(tǒng)一,大數(shù)據(jù)的采集方式、分析手段等方面還存在一些問題,因此大數(shù)據(jù)的利用效率并未達到最佳狀態(tài),大數(shù)據(jù)的分析利用還有待我們進一步的研究和和完善。

1 大數(shù)據(jù)的特點

大數(shù)據(jù)的“大”就是特點之一,他代表大數(shù)據(jù)信息量大、規(guī)模大,且大數(shù)據(jù)的規(guī)模會保持持續(xù)、高速的增長趨勢。其次,大數(shù)據(jù)的價值高,這些數(shù)據(jù)被廣泛的應用于數(shù)學、物理、生物、工程、管理、營銷等多個方面,在其中占有很重要的角色。例如,部隊管理上,利用大數(shù)據(jù)分析管理經(jīng)驗、預測管理結(jié)果等,對提高部隊的綜合管理水平很有幫助。 此外,大數(shù)據(jù)信息相對于簡單的信息加工有許多優(yōu)勢,一方面,大數(shù)據(jù)信息加工要不斷的積累和更新,而一般的簡單信息加工具有重復加工、反復存儲等缺點,無形中增加了信息收集、加工、利用的成本。因此相對于簡單的信息加工,大數(shù)據(jù)的價值優(yōu)勢顯而易見。再次,大數(shù)據(jù)具有交叉復用的特點,數(shù)據(jù)存入信息庫后可以被不同的人同時調(diào)用,數(shù)據(jù)信息也可被反復調(diào)用,這樣的數(shù)據(jù)庫節(jié)省了信息資源整理的成本,對提高信息資源的利用效率意義重大。第四,大數(shù)據(jù)具有全信息可見性,一方面,大數(shù)據(jù)信息量豐富,各類信息包含其中,且更新速度較快,信息類型全面,利用效率高。另一方面,大數(shù)據(jù)對于信息的生產(chǎn)、組織、流通等有較為成熟的流程,這樣既保證了信息收集的全面性,也確保了數(shù)據(jù)庫信息的廣泛性、全面性。

2 大數(shù)據(jù)的統(tǒng)計

大數(shù)據(jù)是當前計算機網(wǎng)絡應用的發(fā)展趨勢,大數(shù)據(jù)的統(tǒng)計方式和分析方式都很豐富,當前大數(shù)據(jù)的統(tǒng)計目的在于更深層的挖掘信息廣泛信息背后的巨大價值。在應用過程中人通過大數(shù)據(jù)要看到的是事物的本質(zhì)和全面情況,要了解事物的實時發(fā)展情況,因此大數(shù)據(jù)統(tǒng)計中,對于數(shù)據(jù)分析、數(shù)據(jù)收集、用戶信息等較為重視,大數(shù)據(jù)的統(tǒng)計和分析利用要對不同來源的信息數(shù)據(jù)進行科學的、有效的整合,才能滿足“人、機、物 ”對信息交換融合需求,提高人機交流的效果,更好的把握物發(fā)展的趨向和規(guī)律,以實現(xiàn)數(shù)據(jù)信息利用的更高價值。

3 大數(shù)據(jù)的分析利用

大數(shù)據(jù)的分析利用形式很多,就大數(shù)據(jù)分析而言大體分為可視化分析、實時分析、關聯(lián)分析。以可視化分析為例,可視化就是能夠直觀的看到的信息數(shù)據(jù),如文本、圖片、圖像等,在數(shù)據(jù)整理中發(fā)現(xiàn)不同類型知識結(jié)構(gòu)和內(nèi)容的可直觀的進行分類、加工、利用,這些信息數(shù)據(jù)的應用是用來反映一個事物與其他事物的關聯(lián)性,其特點是可以直觀的應用信息數(shù)據(jù),也可深挖數(shù)據(jù)信息,還可對數(shù)據(jù)信息進行預測分析,不同的大數(shù)據(jù)利用目的,可通過不同的方式分析、應用信息數(shù)據(jù),在可視化分析過程中,信息互交性強是一個最突出的特點,信息的者不僅是信息的傳播者,還是信息的接收者,不同的大數(shù)據(jù)用戶可通過信息交互的形式管理和開發(fā)信息數(shù)據(jù),使信息數(shù)據(jù)更具利用價值。其次,可視化分析的直觀性很強,信息數(shù)據(jù)顯示出多維性,信息數(shù)據(jù)的分類、排序、組合等可不斷的變化,其顯示也可分為圖像、三維、動畫等,形式非常豐富,加工利用的價值很高。其他分析手段的應用也很廣泛,但不論哪一種分析手段,大數(shù)據(jù)分析的最終目的都是對信息數(shù)據(jù)的利用,在這一過程中要通過計算機網(wǎng)絡強大的信息傳輸、存儲、分析等功能,揭示事物之間的聯(lián)系和事物的發(fā)展規(guī)律,并結(jié)合對信息數(shù)據(jù)的挖掘,開發(fā)信息數(shù)據(jù)隱藏的價值,揭示事物之間內(nèi)在的聯(lián)系,以便更準確的掌握事物的發(fā)展動向,預測事物的發(fā)展趨勢。當前,大數(shù)據(jù)分析利用還存在一些難點,例如大數(shù)據(jù)標準不統(tǒng)一、采集方法單一、數(shù)據(jù)處理龐雜等,要提高大數(shù)據(jù)的分析利用價值,這些問題是值得考慮的。第一,統(tǒng)一大數(shù)據(jù)標準,結(jié)合大數(shù)據(jù)不同的特點、來源等,將非結(jié)構(gòu)化數(shù)據(jù)進行標準化處理,以方便信息的統(tǒng)計和分析利用。同時完善大數(shù)據(jù)統(tǒng)計的指標,簡化大數(shù)據(jù)的統(tǒng)計、利用過程。第二,完善和豐富大數(shù)據(jù)的采集方式,同時改進數(shù)據(jù)處理方式,使用戶在大數(shù)據(jù)利用中能夠轉(zhuǎn)變身份,不僅是大數(shù)據(jù)的應用者,還是大數(shù)據(jù)的建設者。第三,豐富大數(shù)據(jù)分析手段,進一步改進非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換為結(jié)構(gòu)化數(shù)據(jù)的方法和技術,以提高信息數(shù)據(jù)的分析效率,增加其利用價值。此外,應結(jié)合大數(shù)據(jù)統(tǒng)計和分析利用中的各種問題,系統(tǒng)的分析大數(shù)據(jù)的統(tǒng)計、分析、利用規(guī)律,更深層的挖掘信息數(shù)據(jù)的潛力,使其更好的為我們服務。

4 結(jié)語

大數(shù)據(jù)的利用在當前的計算機網(wǎng)絡應用中早已成為熱門話題,但具體的利用手段還不成熟,其中存在著一些不足和安全隱患,針對這些問題大數(shù)據(jù)的利用效益顯然更受人們關注。總之,大數(shù)據(jù)的發(fā)展是信息時代的必然趨勢,為信息數(shù)據(jù)的統(tǒng)計、分析、利用提供了絕佳的機會,使信息資源的利用價值更為突出。因此,研究大數(shù)據(jù)的統(tǒng)計和分析利用不僅要停留在當下,更要放遠眼界,重視信息科技的發(fā)展,才能將對大數(shù)據(jù)的研究推向另一個高度。

參考文獻

[1]張莉,林海霞.給予互聯(lián)網(wǎng)信息傳輸?shù)木W(wǎng)絡大數(shù)據(jù)校準技術研究[J].激光雜志,2016(06):119-122.