- 相關(guān)推薦
大數據技術(shù)在計算機信息系統中的運用論文
1引言
在當前社會(huì )經(jīng)濟不斷進(jìn)步、大數據不斷發(fā)展的時(shí)代背景下，許多過(guò)去難以表達的信息都可以運用數據的形式來(lái)表現和存儲下來(lái)。在大數據時(shí)代進(jìn)入到一個(gè)數據處理和快速發(fā)展的階段之后，我們更是能夠運用計算機信息技術(shù)來(lái)預測事物的發(fā)展，在這種環(huán)境下，人們的知識層次、價(jià)值體系和平時(shí)日常的行為方式便會(huì )受到了很大的影響。在當前，一些還沒(méi)有被發(fā)掘的數據，其潛力價(jià)值能否被發(fā)現和使用，深化改革大環(huán)境下的經(jīng)濟、交通、環(huán)保等領(lǐng)域的改革是否可以順利實(shí)現，都是由能不能認識到大數據及其潛在功能和價(jià)值所決定的。
2大數據
2.1大數據的定義及其主要特征
在業(yè)內，大數據和其他新興學(xué)科一樣還沒(méi)有一個(gè)統一的定義和界定標準。一般情況下認為：大數據是由一些異構數據所組成的集合，能夠運用較為方便合理的算法及工具從中找出有價(jià)值的信息，并為人類(lèi)帶來(lái)社會(huì )和經(jīng)濟效益。它又被稱(chēng)為海量數據、大資料，這指的是其波及的數據量范圍廣大，以至于在合理時(shí)間內根本就沒(méi)有辦法通過(guò)人工獲取、管理等方式整合成為人類(lèi)所能明晰、解讀的信息。這些數據來(lái)源廣泛，比如監控視頻、網(wǎng)上交易記錄等。盡管還沒(méi)有一個(gè)統一規范的定義，但大量的這些數據都被稱(chēng)為大數據。大數據具有如下四個(gè)特性：①數據發(fā)展速度和處理速度要求快；②大數據的多樣性，其數據來(lái)源豐富，格式又包括有多種不同的表現形式，如聲音、視頻、圖片等；③數據的存儲和計算量比較大；④大數據的信息巨大導致其價(jià)值密度相對較低，因此要想真正的找到有價(jià)值的數據難度較大。
2.2大數據時(shí)代下的思維變革
�、僭诶么髷祿ソ鉀Q一些特殊的問(wèn)題時(shí)，能夠處理更多的信息而不再依賴(lài)簡(jiǎn)單的隨機采樣。②為了分析處理更多的問(wèn)題，需要對數據泛化，因為在大數據的簡(jiǎn)單算法之下有可能比先前復雜的算法更加方便有效。③大數據的背景下，人們更加聚焦于事物之間的相關(guān)關(guān)系而不是其因果關(guān)系。
2.3MapReduce框架
MapReduce是谷歌推出的一種計算編程模型，其主要目的是對龐大的數據進(jìn)行并行處理。因此，MapReduce就把數據并行處理的任務(wù)分解成MAP和REDUCE這兩個(gè)核心操作，這種設計理念在一定程度上受到一些編程語(yǔ)言如高階函數的影響。
3大數據處理的關(guān)鍵技術(shù)
3.1數據備份技術(shù)
大數據時(shí)代背景下，數據的安全備份工作非常重要。安全備份是數據容災的基礎和前提，是為了預防偶然情況而采取的一種安全保護手段，備份的核心工作是恢復數據，根本目的是數據的再利用。它具體指的是如果出現一些突發(fā)情況從而致使存儲在系統中的數據、文件等丟失或者說(shuō)損壞的時(shí)候，系統能夠準確而迅速的將數據進(jìn)行恢復。
3.2云計算技術(shù)
假如把形式多樣的大數據比作在高速公路上運行的各種汽車(chē)，那么這條高速公路就是云計算，云計算是大數據技術(shù)的核心內容。正是基于云計算在海量信息儲存、分析以及應用管理等方面的支持，大數據才能夠在社會(huì )中廣泛應用。谷歌的各種大數據信息技術(shù)和應用平臺就是在云計算的基礎上建立起來(lái)的，而其中最為典型的就是以MapReduce（批處理技術(shù)）、UFS（UIT云存儲系統）、BigTable（分布式數據庫）為代表的大數據以及在此基礎上建立的數據處理平臺。
3.3Hadoop
在大數據時(shí)代背景下，人們對數據的分析、應用和管理都提出了更高的要求，傳統的數據處理技術(shù)與關(guān)系型數據庫已經(jīng)不能滿(mǎn)足時(shí)代的發(fā)展要求。為了能夠給大數據的分析處理提供一個(gè)更高、更好、更可靠的平臺，Apache基金會(huì )研發(fā)了一個(gè)開(kāi)源平臺Hadoop，這個(gè)平臺用Java語(yǔ)言編寫(xiě)，已經(jīng)發(fā)展成為一個(gè)包括HBase（分布式數據庫）和HDFS（分布式文件系統）等功能在內的完整系統，成為當下相對主流的大數據應用平臺。
4大數據技術(shù)應用所帶來(lái)的信息系統的安全隱患以及應對策略
大數據之下，海量的信息數據一般都存儲在一些分布式的網(wǎng)絡(luò )節點(diǎn)當中，管理相對混亂和分散，而且系統也沒(méi)有辦法獨立掌控用戶(hù)交易數據的場(chǎng)所，因此很難分辨用戶(hù)是否具有合法的身份標識，這就非常容易致使一些不法客戶(hù)肆意竊取、篡改他人信息；另外，大數據存儲系統中含有大量的個(gè)人隱私信息及各種數據記錄，在大數據信息的挖掘利用中，怎樣能夠確定一個(gè)信息的開(kāi)放和保護尺度，是當前大數據發(fā)展過(guò)程中面臨的又一難題。為了充分合理的利用大數據并對一些風(fēng)險進(jìn)行預防，在此，我們特提出以下四點(diǎn)建議：①建立健全相關(guān)政策，國家需要加強頂層設計，有力的確保數據儲存安全；②積極探索相關(guān)技術(shù)，加強對個(gè)人安全隱私信息的保護力度；③增強計算機防火墻的安全防護能力，有效抵御網(wǎng)絡(luò )網(wǎng)客，確保網(wǎng)絡(luò )環(huán)境安全；④深化云計算安全領(lǐng)域改革，充分適應信息化的發(fā)展要求，確保云端數據安全。
5案例分析-對A公司大數據及其信息管理系統的研究
A公司實(shí)施信息化已有多年，每年在信息化方面，都會(huì )投入了大量的人力和物力，并已搭建了公司的局域網(wǎng)和廣域網(wǎng)。不過(guò)，由于在初期的信息化建設中，公司是以服務(wù)支持軟件應用為主，還沒(méi)有站在一個(gè)更高的角度來(lái)開(kāi)展信息化工作，因此也就沒(méi)有真正實(shí)現大數據的應用，更沒(méi)有制定較為系統的信息化規劃，各信息及系統沒(méi)有集成，信息孤島現象嚴重，具體表現為系統中的業(yè)務(wù)流程尤其是在工程、營(yíng)銷(xiāo)、生產(chǎn)和財務(wù)等環(huán)節存在嚴重的斷層現象。
此外，由于標準不一，系統沒(méi)有整合、較為分散，這就給系統的集成帶來(lái)了很大的困難，信息不能共享；數據也缺乏標準化，無(wú)論是自行開(kāi)發(fā)，還是從國外市場(chǎng)上買(mǎi)來(lái)的即時(shí)軟件，一般都不注意數據的標準化，或數據標準自成一體，應用項目上得越多，數據的不一致性就越嚴重；系統開(kāi)發(fā)沒(méi)有標準化，A公司在建設信息系統的過(guò)程中沒(méi)有使用相對一致的開(kāi)發(fā)、應用平臺及工具，不利于降低系統維護成本、技術(shù)人員培訓成本等。為了克服這種現象，A公司認識到，要解決這些問(wèn)題必須對系統進(jìn)行集成，并建立健全信息化建設的統一標準。為此，A從公司的戰略入手，結合公司的業(yè)務(wù)發(fā)展狀況，深入分析了企業(yè)發(fā)展對大數據信息化建設的需求。而要配合好這些行動(dòng)，首先要做的就是建立客戶(hù)關(guān)系管理系統，記錄客戶(hù)信息，使公司擁有一個(gè)全面的客戶(hù)信息資源庫，包括客戶(hù)的基本信息、交易記錄等。
其次，通過(guò)分析，A公司對所要應用的每一套信息數據系統都提出了詳細的業(yè)務(wù)需求，通過(guò)對比國內外相關(guān)的信息系統，在綜合考慮需求滿(mǎn)足程度及成本等因素下，該公司選擇了一套國外的成熟軟件產(chǎn)品進(jìn)行分步實(shí)施。再次，A公司通過(guò)對業(yè)務(wù)流程的分析，從業(yè)務(wù)的角度提出了企業(yè)的信息流程，明確了系統間所需要的的集成關(guān)系。為了較好的整合現有及未來(lái)的系統，實(shí)現信息的集成、共享與流轉，減少手工的干預，A公司提出了信息技術(shù)架構及其整合方案，包括應用系統的組成與結構、信息模型、信息和數據在應用系統之間的分布與流向、信息技術(shù)標準和規范等。同時(shí)，該公司還分析了目前在市場(chǎng)上較為主流的系統集成的技術(shù)和產(chǎn)品，在盡量確�，F有投資，同時(shí)又兼顧未來(lái)系統方便集成的原則指導下，該公司選擇了最合適的產(chǎn)品和技術(shù)對現有的系統進(jìn)行分步整合。最后，A公司認為，對信息化的規劃建設來(lái)說(shuō)還有一個(gè)十分重要的問(wèn)題，即大數據在信息系統中的實(shí)施及資源配置計劃。只有明確了信息系統建設的時(shí)間表和優(yōu)先順序，才能更好地指導信息系統的實(shí)施。
因此，A公司在綜合分析了公司的未來(lái)戰略、發(fā)展方向、業(yè)務(wù)及系統現狀后，提出了大數據信息系統實(shí)施計劃。在該實(shí)施計劃中，不僅安排了實(shí)施的時(shí)間表，還給出了系統實(shí)施的大概預算及主要的產(chǎn)品供應商，同時(shí)提出系統實(shí)施需要注意的主要問(wèn)題等，為以后幾年的信息數據化網(wǎng)絡(luò )建設提供了一個(gè)很好的依據和參考。
6結束語(yǔ)
總而言之，在當今信息知識跳躍式發(fā)展的今天，大數據技術(shù)已經(jīng)被廣泛應用于經(jīng)濟金融、醫療、工業(yè)等領(lǐng)域。隨著(zhù)大數據技術(shù)的不斷發(fā)展，相關(guān)信息行業(yè)競相從規模龐大、結構復雜的大數據海洋中攫取更多有價(jià)值的數據信息用于分析、解決現實(shí)生活中的一些實(shí)際問(wèn)題。由于大數據技術(shù)在計算機信息系統中的運用，這就使得計算機信息系統得到了快速的發(fā)展，在今后，大數據技術(shù)在計算機信息系統中的作用將會(huì )越來(lái)越重要。
【大數據技術(shù)在計算機信息系統中的運用論文】相關(guān)文章：
數據挖掘技術(shù)在飯店營(yíng)銷(xiāo)中的運用08-11
計算機音樂(lè )技術(shù)在電影音樂(lè )中的運用論文10-27
臨床醫學(xué)中數據挖掘技術(shù)的運用分析09-24
AR技術(shù)在舞臺音樂(lè )中的運用論文06-25
淺談?dòng)嬎銠C技術(shù)在語(yǔ)文教學(xué)中的運用論文10-15
大數據技術(shù)在移動(dòng)通信網(wǎng)絡(luò )優(yōu)化的運用論文06-09
建筑設計中BIM技術(shù)的運用論文05-09
計算機網(wǎng)絡(luò )設計中關(guān)系數據庫技術(shù)的運用探討06-27
計算機軟件在機電技術(shù)的運用論文08-18