大數據計算機信息的處理技術(shù)論文
0引言
如今，互聯(lián)網(wǎng)快速發(fā)展，信息化程度越來(lái)越高，大數據在經(jīng)濟社會(huì )發(fā)展中的作用也越來(lái)越突出。大數據已經(jīng)進(jìn)入到我們的生活當中，不論是學(xué)者做研究還是企業(yè)追求更好的發(fā)展都離不開(kāi)大數據的支撐，而大數據的搜集與整理需要計算機信息處理技術(shù)才能進(jìn)行，因此，如果想要更好地搜集和利用數據，就要不斷地探究計算機信息處理技術(shù)，不斷地進(jìn)行創(chuàng )新，從而促進(jìn)社會(huì )更好地發(fā)展。
1計算機信息處理技術(shù)和大數據概念闡述
1．1計算機信息處理技術(shù)的概念闡述
所謂計算機信息處理技術(shù)，又稱(chēng)云計算，是指利用網(wǎng)絡(luò )特有的計算方式，使相關(guān)計算機使用者可以接收到想要的資源和信息的一種類(lèi)似于電網(wǎng)的一種信息處理技術(shù)。
1．2大數據的相關(guān)概念闡述
如今，大數據的開(kāi)發(fā)是一項非常重要和有意義的工作，因此正確地認識大數據的相關(guān)概念就顯得尤為重要。大數據是指從各種類(lèi)型的數據中，快速地獲取有價(jià)值的相關(guān)信息的能力。而大數據的快速發(fā)展，也推動(dòng)了很多企業(yè)自身的發(fā)展。同時(shí)，大數據在不斷被人們運用的過(guò)程中，也顯現出了數據量巨大、價(jià)值密度低、處理速度快以及數據種類(lèi)多等諸多特點(diǎn)。
2大數據時(shí)代下計算機信息處理技術(shù)的應用
2．1數據采集和交換平臺
數據采集和交換平臺，是將集團各種來(lái)源、各種形式（系統、接口、數據庫、文件）、各種格式（Excel、Access、XML、Oracle、SQLServerDB2等）的數據經(jīng)過(guò)抽取、沉淀，成為具有業(yè)務(wù)關(guān)系的、“干凈”的數據，存入集團核心數據資源庫。數據采集和交換平臺應滿(mǎn)足集團在業(yè)務(wù)系統建立前和建立后的數據采集和交換要求：
�。�1）當業(yè)務(wù)系統還未建立時(shí)，數據采集和交換平臺實(shí)現人工錄入和數據的批量導入形式的數據采集沉淀，包括可定制的數據錄入系統，可以根據用戶(hù)的需求進(jìn)行錄入界面的定制，進(jìn)行數據的錄入采集，解決原來(lái)存放在紙質(zhì)文件等非信息化介質(zhì)上的數據問(wèn)題；數據的批量導入系統，支持對Excel、Access、XML等類(lèi)型文件的直接導入，并可擴展導入用戶(hù)自定義的數據類(lèi)型的文件，解決原來(lái)以文件形式存儲的數據問(wèn)題。
�。�2）當業(yè)務(wù)系統建立后，數據采集和交換平臺提供了ETL（數據的抽取、轉換、裝載）工具，實(shí)現了數據資源中心與各個(gè)業(yè)務(wù)系統之間一種自動(dòng)化的數據抽取、轉換和沉淀。數據采集和交換平臺提供數據交換接口定制功能（有操作界面，通過(guò)鼠標拖拽，完成業(yè)務(wù)系統與數據中心的數據映射），無(wú)須開(kāi)發(fā)（當使用技術(shù)功能時(shí)，必須具有快速、準確的業(yè)務(wù)梳理、分析能力，才能通過(guò)拖拽，完成數據接口配置）即可根據兩個(gè)業(yè)務(wù)系統要交換的數據內容進(jìn)行接口的定制，以Web服務(wù)的方式提供給其他業(yè)務(wù)系統調用，實(shí)現其他業(yè)務(wù)系統的數據沉淀到數據資源庫。
集團各部門(mén)都需要共享、利用集團核心數據資源庫的數據，因此，數據資源庫必須考慮數據如何共享，以及共享過(guò)程中產(chǎn)生的數據安全性的問(wèn)題。數據采集和交換平臺提供的數據共享服務(wù)功能，可以將需要共享的數據以服務(wù)的方式對外發(fā)布，同時(shí)配以用戶(hù)管理和權限管理，既實(shí)現了數據共享應用，又保證了數據的安全性。數據采集和交換平臺將針對不同類(lèi)型的業(yè)務(wù)數據，采用不同的數據獲取方式———對于需要及時(shí)更新的業(yè)務(wù)數據，采用實(shí)時(shí)更新和實(shí)時(shí)服務(wù)的方式進(jìn)行；對于及時(shí)性要求不高的業(yè)務(wù)與數據，采用定時(shí)增量的服務(wù)方式進(jìn)行，更新時(shí)間一般選擇在深夜等業(yè)務(wù)量較少的時(shí)間段進(jìn)行。數據采集和交換平臺將建立錯誤監控處理機制，對數據收集和交換的過(guò)程、運行狀態(tài)、數據流量等進(jìn)行監控，及時(shí)發(fā)現數據收集和交換中的異常問(wèn)題，并建立完備的錯誤日志，在數據處理失敗時(shí)進(jìn)行數據恢復。數據采集和交換平臺提供數據接口版本管理和數據接口權限管理功能。數據接口版本管理———系統在進(jìn)行接口變更時(shí)需要對接口版本進(jìn)行升級，并對利用接口的應用系統功能進(jìn)行同步更新。數據接口權限管理———不同系統對基礎數據庫的應用需要使用不同的數據訪(fǎng)問(wèn)賬號，并可以通過(guò)日志管理查看數據接口的歷史調用情況。
2．2有效信息的收集和傳播
如果想在眾多紛繁復雜的數據中快速找到有效信息，首先要做的就是收集大量數據，然后運用云計算對收集的相關(guān)數據進(jìn)行分類(lèi)和整合，最后從中篩選出有效信息。而數據的傳播方式就如同電網(wǎng)的運行方式，兩者存在很多的相同點(diǎn)。
2．3相關(guān)信息的存儲
數據管理維護平臺主要解決數據存儲之后，數據自身的管理、維護、安全等問(wèn)題，保證數據自身高效、合理、有效地運行。主要包括數據管理、數據資源目錄、日志管理等功能。
�。�1）通過(guò)業(yè)務(wù)分析，建立數據標準體系（數據資源目錄），通過(guò)數據配置功能，可以有序、快速地建立各種業(yè)務(wù)數據庫、數據表（具有很強的擴展能力，適合將來(lái)業(yè)務(wù)發(fā)展需要）。
�。�2）利用數據管理維護平臺提供的數據資源目錄，系統使用人員可以用數據臺賬等直觀(guān)的方式，方便地查看有哪些數據資源，數據管理人員能實(shí)時(shí)掌握數據的動(dòng)態(tài)情況。
�。�3）數據管理維護平臺為專(zhuān)業(yè)的數據管理人員提供業(yè)務(wù)基礎數據的維護功能，實(shí)現資源目錄的管理與維護；為高級用戶(hù)提供自由定義開(kāi)發(fā)新數據結構功能，實(shí)現數據關(guān)系的維護。
�。�4）數據管理維護平臺將提供完備的日志管理，可以監控具體有哪些用戶(hù)、在什么時(shí)間、訪(fǎng)問(wèn)了哪些數據、做了哪些操作（查詢(xún)、分析、修改等），保證系統運行過(guò)程中監控沒(méi)有盲點(diǎn)，便于后期進(jìn)行各種運行情況的分析。如今，隨著(zhù)大數據時(shí)代的到來(lái)，信息化程度的不斷提高，人們利用大數據搜集到的視頻、音頻以及文字等數據內容也越來(lái)越多，而計算機的存儲空間是一定的，所以有些數據就不能被存儲，此時(shí)就需要采用區別于傳統方法的云存儲方式，才能有效地解決計算機存儲空間不足的問(wèn)題。
2．4相關(guān)信息安全問(wèn)題
在信息技術(shù)快速發(fā)展的時(shí)代背景下，許多數據已經(jīng)不是單一的部分，而是和很多數據都存在聯(lián)系的，所以，一旦有一部分數據出現問(wèn)題，其他部分的數據也會(huì )受到一定程度的影響，這也會(huì )對信息庫的安全形成一定威脅。因此，在建立相關(guān)的信息數據庫時(shí)，需要合理地管理整個(gè)信息系統。由于我國現在的計算機水平不能滿(mǎn)足大數據的發(fā)展要求，因此，需要發(fā)展相關(guān)的信息安全處理技術(shù)來(lái)提高大數據相關(guān)信息的安全性。比如，可以通過(guò)加強大數據云計算功能的研發(fā)工作的方式，促進(jìn)大數據功能和結構的優(yōu)化，從而通過(guò)技術(shù)上的開(kāi)拓創(chuàng )新來(lái)解決數據分析系統出現的問(wèn)題，提高數據的安全性。此外，還可以通過(guò)定期對技術(shù)人員進(jìn)行培訓，來(lái)提高他們的個(gè)人能力和綜合素質(zhì)以及使用技術(shù)的熟練程度，從而為信息安全體系的建設提供專(zhuān)業(yè)化的人才保障。最后，計算機信息處理技術(shù)在大數據的背景下，既面臨著(zhù)機遇，同時(shí)也面臨挑戰，在信息技術(shù)不斷發(fā)展的過(guò)程中，大數據的快速發(fā)展激勵著(zhù)人們不斷地去開(kāi)發(fā)新技術(shù)，同時(shí)當大數據的數據庫遭到病毒入侵時(shí)，也會(huì )使數據庫紊亂，無(wú)法進(jìn)行正常工作，給人們帶來(lái)巨大的損失，因此，就需要研發(fā)更強大有效的系統保護軟件來(lái)保證大數據的安全。
3計算機信息處理技術(shù)的未來(lái)
大數據有著(zhù)以往傳統數據信息搜集系統所沒(méi)有的結構復雜、信息種類(lèi)多、信息量大等特點(diǎn)，由于大數據中的各種信息都是緊密聯(lián)系在一起的，所以使得現在的信息處理系統無(wú)法對這些數據進(jìn)行處理。而數據的搜集和存儲是需要儲存在計算機的硬件中的，因此，計算機的硬件的好壞非常重要，同時(shí)有些計算機的硬件不能滿(mǎn)足大數據的儲存。這時(shí)，就需要研發(fā)人員通過(guò)開(kāi)發(fā)云存儲、云空間等，釋放計算機硬件的運行壓力，把數據保存在網(wǎng)絡(luò )上，以供用戶(hù)下載。此外，研發(fā)人員還需要加大計算機硬件的研發(fā)工作的力度，增加計算機硬盤(pán)的存儲量，從而有效地解決大數據在運用過(guò)程中出現的信息量過(guò)大及結構復雜等問(wèn)題。隨著(zhù)科學(xué)技術(shù)的不斷進(jìn)步，出現了例如云計算、云存儲等全新的計算機網(wǎng)絡(luò )體系，這種模式改變了以往計算機的傳統傳輸觀(guān)念，同時(shí)有力地推動(dòng)了大數據背景下的計算機信息處理技術(shù)的快速發(fā)展。此外，很多研發(fā)人員也改變了傳統的研發(fā)方式，突破各種限制，使用現在普遍應用的網(wǎng)絡(luò )工具將很多的小型公司聯(lián)合在一起，共同參與新技術(shù)的研發(fā)工作。
4結語(yǔ)
綜上所述，與現在的很多發(fā)達國家相比，我國的計算機信息處理技術(shù)由于起步晚、資金不充足等原因，與發(fā)達國家存在一定的差距。同時(shí)，由于我國對計算機技術(shù)給予高度重視，近年來(lái)的計算機信息處理技術(shù)也不斷提高。因此，針對計算機信息處理技術(shù)在大數據時(shí)代背景下出現的一些問(wèn)題，筆者在上文給出了相應的建議。同時(shí)，如今的發(fā)展趨勢也已經(jīng)表明計算機信息處理技術(shù)在日常生活中的重要性，相信在未來(lái)的探索中，我國在這方面也會(huì )越來(lái)越出色。
【大數據計算機信息的處理技術(shù)論文】相關(guān)文章：
計算機數據庫論文09-30
計算機信息安全論文09-15
計算機信息論文06-20
計算機信息安全論文05-21
農學(xué)工程教育中計算機信息技術(shù)的運用的論文11-02
計算機信息安全論文【精華】11-14
計算機應用技術(shù)論文06-08
計算機信息管理論文11-05
計算機信息管理論文05-16