大數(shù)據(jù)自動分析與數(shù)據(jù)挖掘探討的論文
近些年來，信息科技和網(wǎng)絡的通信技術已經(jīng)得到了飛速的發(fā)展，并且全國的信息基礎設施也得到了完善，在全球的數(shù)據(jù)已經(jīng)呈現(xiàn)出了極速增長的模式狀態(tài)。在此種情況下，傳統(tǒng)的數(shù)據(jù)處理方式已經(jīng)滿足不了現(xiàn)代化的處理需求，因此需要利用大數(shù)據(jù)的自動分析和數(shù)據(jù)挖掘來實現(xiàn)對數(shù)據(jù)的有效分享和利用。大數(shù)據(jù)科學已經(jīng)成為了一個橫跨信息科學、社會科學以及網(wǎng)絡科學的新型交叉學科，受到了學術界的廣泛關注。
一、遙感大數(shù)據(jù)的概述以及特征
在現(xiàn)代社會當中，遙感大數(shù)據(jù)已經(jīng)成為了大數(shù)據(jù)的重要代表，成為了科學研究方面的重點研究方面，但是在現(xiàn)階段當中還需要對其科學理論和方式進行不斷的深入研究。遙感大數(shù)據(jù)具有大數(shù)據(jù)的特征，并且也具有自身獨特的特征。在外部特征方面，首先具有海量的特征。遙感大數(shù)據(jù)的數(shù)據(jù)具有海量的特點，并且對著遙感技術的不斷發(fā)展，在現(xiàn)階段當中的高分辨率和高動態(tài)的新型衛(wèi)星傳感器在單位時間之內(nèi)可以捕獲到更多的數(shù)據(jù)量；其次還具有數(shù)據(jù)異構(gòu)的特點，也就是說在數(shù)據(jù)生產(chǎn)過程當中所依賴到的業(yè)務系統(tǒng)之間會呈現(xiàn)出的不同狀態(tài)，都需要由不同的數(shù)據(jù)中心來進行提供的，并且在邏輯結(jié)構(gòu)或者組織方式上也呈現(xiàn)出了不同的特點；另外，還具有數(shù)據(jù)多源的特點，集中體現(xiàn)在數(shù)據(jù)的來源和捕獲信息的手段方面，是可以擁有多種獲取形式的，包括全球的觀察網(wǎng)絡點接收到的實時信息，以及民眾手中的用戶端的個性化信息。在內(nèi)部特征方面，首先具有高維度性的特點，遙感大數(shù)據(jù)的數(shù)據(jù)類型呈現(xiàn)出了多樣化的特點，因此數(shù)據(jù)當中的維度也變得越來越高，集中體現(xiàn)在了空間維度、時間維度以及光譜維度等。其次還具有多尺度性的特點，成為了遙感大數(shù)據(jù)的重要特點，也就是說在進行數(shù)據(jù)的獲取過程當中，可以根據(jù)不同的遙感技術和相對應的技術水平，來進行有效的劃分，在空間和時間上呈現(xiàn)出多尺度的特點。另外，還具有非平穩(wěn)性的特點，由于遙感大數(shù)據(jù)廣泛的獲取方式和物理意義，在信息理論的角度上來說，就屬于典型的非平穩(wěn)信號，呈現(xiàn)出分布參數(shù)或者規(guī)律隨時發(fā)生變化的特點。
二、遙感大數(shù)據(jù)的自動分析和數(shù)據(jù)挖掘
2.1自動分析。首先，需要對遙感大數(shù)據(jù)的表達進行了解，在這個過程當中需要抽取多元化的特征來進行表示，從而建立起遙感大數(shù)據(jù)的目標一體化，在研究過程當中主要包括對遙感大數(shù)據(jù)的`多元離散特征的有效提取，形成在不同的傳感器當中的提取方式和方法。還要對若干大數(shù)據(jù)的多元特征進行歸一化的表達，從而提升對大數(shù)據(jù)的處理能力和處理效率。其次就需要對遙感大數(shù)據(jù)進行相關的檢索，在檢索過程當中，需要利用網(wǎng)絡化和集成化的方式進行檢索，制定出基礎設施的計劃，提升對其數(shù)據(jù)的訪問和檢索效率。并且針對海量的遙感大數(shù)據(jù)來會說，需要檢索出符合用戶需求和感興趣的內(nèi)容和數(shù)據(jù)，就需要對數(shù)據(jù)內(nèi)容進行比對，從而判斷出用戶所需要的內(nèi)容，從大量的數(shù)據(jù)當中進行快速的檢索到目標。在檢索的過程當中，發(fā)展知識驅(qū)動的遙感大數(shù)據(jù)的檢索方式是最有效的方式之一，可以分為場景檢索服務、多源海量復雜場景數(shù)據(jù)的智能檢索以及信息數(shù)據(jù)的檢索等。另外，就是對遙感大數(shù)據(jù)的理解的，通過遙感大數(shù)據(jù)的科學，可以實現(xiàn)數(shù)據(jù)向知識的有效轉(zhuǎn)變，在這個過程當中就需要根據(jù)遙感大數(shù)據(jù)本身的特征和數(shù)據(jù)檢索的方式來對數(shù)據(jù)內(nèi)容實現(xiàn)有效的提取。最后就是遙感大數(shù)據(jù)云的技術，可以將各種方式的遙感信息資源進行有效的整合，建立起遙感云服務的相關新型業(yè)務應用和服務模式，可以將在天空當中的傳感器所捕捉到的信息通過軟件的計算和整合來實現(xiàn)數(shù)據(jù)資源的有效存儲和處理，從而使得用戶可以在很快的時間之內(nèi)獲取到有效的服務。
2.2數(shù)據(jù)挖掘。首先需要對遙感大數(shù)據(jù)的數(shù)據(jù)挖掘過程進行了解，包括數(shù)據(jù)的獲取、存儲以及處理和整合等，在整個過程當中都具有大數(shù)據(jù)的特點。在進行捕獲數(shù)據(jù)的過程當中可以從各種不同的傳感器當中進行獲取，然后對數(shù)據(jù)進行采樣和過濾，之后就可以對采集到的數(shù)據(jù)進行處理和分析，最后將其數(shù)據(jù)用可視化的模式進行顯示，方便了客戶的使用和利用。其次，就是遙感大數(shù)據(jù)和廣義的遙感大數(shù)據(jù)的綜合挖掘的過程，利用此種方式，一方面可以與其他的數(shù)據(jù)方式形成良好的互補關系，另外一方面也可以對其數(shù)據(jù)當中的變化規(guī)律以及其他信息進行更好的挖掘和采集。在廣義的遙感時空大數(shù)據(jù)當中，存儲的費用是相當昂貴的，并且在數(shù)據(jù)的分析能力方面也存在嚴重不足的現(xiàn)象，因此在現(xiàn)代社會的智慧城市的建設過程當中發(fā)揮不了其巨大的作用，因此需要利用其他自動化的數(shù)據(jù)智能處理和挖掘的方式來對其空間地理分布的數(shù)據(jù)進行全新的挖掘和過濾。在時空分布的視頻數(shù)據(jù)挖掘過程當中，在對智能數(shù)據(jù)進行處理和信息提取的同時，還要通過時空當中所分布的視頻數(shù)據(jù)進行自動化的區(qū)分，來有效的區(qū)分正常和非正常的狀態(tài)。在對時空數(shù)據(jù)的挖掘過程當中，主要可以從時空數(shù)據(jù)當中進行提取出隱藏的有用的信息知識，利用各種綜合性的方式和方法，比如統(tǒng)計法、聚類法、歸納法以及云理論等。在遙感大數(shù)據(jù)的挖掘應用方面，可以適用于地球各種尺度和方位的變化，還可以在很大程度上對未知的信息進行良好的篩選和挖掘，推動國家的科學技術的發(fā)展，實現(xiàn)社會的可持續(xù)化發(fā)展。
綜上所述，在不斷的發(fā)展過程當中，我國的遙感數(shù)據(jù)的種類和數(shù)量將呈現(xiàn)出飛速增長的模式，在很多方面以及領域當中已經(jīng)開展了遙感大數(shù)據(jù)的研究工作。值得注意的是，現(xiàn)階段當中需要將遙感大數(shù)據(jù)的理論知識進行實踐化的轉(zhuǎn)變，從而實現(xiàn)遙感大數(shù)據(jù)的自動分析和數(shù)據(jù)挖掘功能，推動科學信息的不斷進步。
參考文獻
[1]宋維靜,劉鵬,王力哲,等.遙感大數(shù)據(jù)的智能處理:現(xiàn)狀與挑戰(zhàn)[J].工程研究-跨學科視野中的工程,2014,(3):259-265.
【大數(shù)據(jù)自動分析與數(shù)據(jù)挖掘探討的論文】相關文章：
《數(shù)據(jù)的波動》說課稿09-25
《Ｅxcel中的數(shù)據(jù)排序》說課稿11-13
《數(shù)據(jù)的分段整理》數(shù)學說課稿06-29