期刊VIP學(xué)術(shù)指導(dǎo) 符合學(xué)術(shù)規(guī)范和道德
保障品質(zhì) 保證專業(yè),沒有后顧之憂
來源:期刊VIP網(wǎng)所屬分類:計算機信息管理時間:瀏覽:次
【摘要】 本文簡要介紹數(shù)據(jù)挖掘、云計算等技術(shù)概念,從通信、鐵路、電力等行業(yè)分析了現(xiàn)階段數(shù)據(jù)挖掘技術(shù)的使用情況,指出了數(shù)據(jù)挖掘程序現(xiàn)存問題,圍繞云計算技術(shù)進行程序開發(fā),以Hadoop為運行環(huán)境,增強數(shù)據(jù)挖掘程序的運行能力,最大化發(fā)揮云計算技術(shù)功能,帶動各行業(yè)量化分析工作有序進行。
【關(guān)鍵詞】 通信 云計算 市場預(yù)測 數(shù)據(jù)挖掘
在物聯(lián)網(wǎng)環(huán)境中,人們使用多種電子設(shè)備,進行網(wǎng)絡(luò)連接。結(jié)合視覺網(wǎng)絡(luò)數(shù)據(jù)統(tǒng)計可知:國內(nèi)移動終端客戶數(shù)量處于穩(wěn)步增長狀態(tài),在[2016,2021]年間,移動客戶數(shù)量增加了18倍。預(yù)計在2023年,移動用戶數(shù)量將會是2016年用戶數(shù)的10倍,移動終端總數(shù)將會達到120億。在此種較大基數(shù)的網(wǎng)絡(luò)數(shù)據(jù)資料環(huán)境下,積極使用云計算技術(shù),各行業(yè)開展數(shù)據(jù)挖掘工作,能夠有效獲取市場預(yù)測信息。
一、技術(shù)概述
1.1數(shù)據(jù)挖掘
數(shù)據(jù)智能分析是從大量的數(shù)據(jù)資料中提取有用信息的過程,表現(xiàn)為多級加工程序,含有多個運行流程。在數(shù)據(jù)挖掘時,按照一定法則進行源數(shù)據(jù)的提煉、優(yōu)化,在前期處理完成時,再使用數(shù)據(jù)挖掘、智能匹配等技術(shù),選擇適用算法開展資料分析,繼而有效獲取數(shù)據(jù)分析結(jié)果。
數(shù)據(jù)挖掘是數(shù)據(jù)智能分析的一個環(huán)節(jié),在較大數(shù)據(jù)量、完整性不足、規(guī)則性不強、含有噪聲、清晰度不高等各類數(shù)據(jù)資料中,借助特定算法捕獲數(shù)據(jù)中的特定規(guī)律,進行有效信息挖掘。此技術(shù)的應(yīng)用,在一定程度上符合特定業(yè)務(wù)的數(shù)據(jù)資料分析需求,比如客戶消費傾向、學(xué)生成績優(yōu)勢科目等。數(shù)據(jù)挖掘過程,融合了多個領(lǐng)域的專業(yè)內(nèi)容,比如數(shù)據(jù)統(tǒng)計、智能學(xué)習(xí)、規(guī)律識別等。數(shù)據(jù)挖掘技術(shù)能夠在大規(guī)模數(shù)據(jù)量中,有效捕獲價值信息,具有較強的市場預(yù)測功能[1]。在數(shù)據(jù)挖掘技術(shù)使用與推廣的各項工作中,能夠在短時間內(nèi)完成資料分析,給予人們決策、市場投資等多重參考依據(jù),以量化分析結(jié)果獲得合理公正的決策方案。
1.2云計算
其一,虛擬化技術(shù)。此技術(shù)的使用旨在有效解決硬件性能分配不均、老舊硬件運行能力欠佳等問題。虛擬化技術(shù)的使用,有效改善了底層物理硬件,使其具有更為透明的特點,對軟件、硬件兩個模塊未進行融合處理。在單個性能硬件中,有效衍生出多組虛擬資源,有效整合虛擬資源,提升物理硬件利用效果。其二,大規(guī)模數(shù)據(jù)處理技術(shù)。在云計算技術(shù)中,是使用大規(guī)模數(shù)據(jù)處理程序,以并聯(lián)運行模型為基礎(chǔ)形式。在此技術(shù)程序中,含有Map、Reduce兩種函數(shù)。在Map函數(shù)處理時,采取逐行數(shù)據(jù)文件的提取與分析,對預(yù)處理完成數(shù)據(jù),將其劃分至新節(jié)點。在數(shù)據(jù)分配完成后,進入Reduce函數(shù)處理環(huán)節(jié),完整讀取Map處理結(jié)果,對中間資料進行合并分析。組合型數(shù)據(jù)處理技術(shù),對于較大數(shù)據(jù)量的資料,具有較強的處理能力。與此同時,此技術(shù)表現(xiàn)出數(shù)據(jù)監(jiān)控能力,能夠自主排查數(shù)據(jù)處理異常位置,進行數(shù)據(jù)處理任務(wù)重啟,確保數(shù)據(jù)處理質(zhì)量。
二、各行業(yè)數(shù)據(jù)挖掘的使用分析
2.1通信行業(yè)應(yīng)用
“云計算”強大的數(shù)據(jù)處理能力被廣為運用在通信行業(yè)。在這個信息化時代下,人們在使用電視、手機、電腦等終端設(shè)備時所產(chǎn)生的上網(wǎng)行為數(shù)據(jù)如果能進行處理和分析就可以挖掘出具有極高價值的信息,例如對用戶進行清晰的定位,除了統(tǒng)計學(xué)意義上的基礎(chǔ)數(shù)據(jù)之外,還能洞察出他們的喜愛偏好、行為習(xí)慣、消費水平等等。信息化程度越高,收集到的信息也越多,云計算能夠存儲海量的數(shù)據(jù),運用分析處理技術(shù),從中為用戶得出更有價值的分析。運營商可以運用云計算,根據(jù)用戶的行業(yè)特性從而制定差異化的解決方案 [1]。
2.2鐵路行業(yè)應(yīng)用
以運維系統(tǒng)為例,探索云計算技術(shù)為基礎(chǔ)的智能數(shù)據(jù)挖掘平臺運行情況。
2.2.1智能感知網(wǎng)絡(luò)
在運維系統(tǒng)中,添加了智能感知網(wǎng)絡(luò),有效集成了感知程序、信息處理等技術(shù),以較大數(shù)字量形式進行信息傳輸,具有較強的故障診斷、信息校正、功能補償能力。系統(tǒng)中以列車感知為主,兼有站場、線路等感知模塊。各類感知網(wǎng)絡(luò)結(jié)構(gòu)中,擁有多個設(shè)備檢測模塊,能夠有效捕獲設(shè)備運行資料,以數(shù)據(jù)化形式展示運維資料,對于設(shè)備運行資料給予量化分析。
2.2.2云計算融合的運維系統(tǒng)
云計算以數(shù)據(jù)分析、數(shù)據(jù)處理為技術(shù)融合目標(biāo)。在互聯(lián)網(wǎng)平臺中,較大數(shù)量的硬件,依據(jù)特定規(guī)則進行硬件連接。同時在需求改變的情況下,形成了低能耗、高效率的資源處理體系,在優(yōu)化基礎(chǔ)設(shè)施成本的基礎(chǔ)上,合理控制設(shè)備運維支出。與此同時,云計算表現(xiàn)出較強的計算能力,在存儲能力、數(shù)據(jù)安全等方面具有高性能,在特定硬盤發(fā)生質(zhì)量損壞時,數(shù)據(jù)不會有丟失情況。在泛式通信體系中,便于用戶自由獲取數(shù)據(jù)資料[2]。智能運維系統(tǒng)中,融合了智能感知系統(tǒng)架構(gòu)中的各類數(shù)據(jù),比如監(jiān)測、檢測等。在進行數(shù)據(jù)整合分析、按類存儲時,能夠有效處理動態(tài)的、非動態(tài)的各類數(shù)據(jù),確保數(shù)據(jù)查詢有效性,增強數(shù)據(jù)查詢便利性。與此同時,結(jié)合各組設(shè)備各時段的運行情況,積極使用智能算法,高效率、精準獲取故障位置,有效解決系統(tǒng)之間聯(lián)通問題。
2.2.3運維資料數(shù)據(jù)挖掘
數(shù)據(jù)挖掘技術(shù)在新型處理體系中,表現(xiàn)出更強的數(shù)據(jù)決策、數(shù)據(jù)分析、系統(tǒng)優(yōu)化各項能力,有效應(yīng)對數(shù)據(jù)量較大、增長能力較強、樣式多種的信息資源。數(shù)據(jù)挖掘技術(shù)的融合價值,集中體現(xiàn)在有效數(shù)據(jù)的整合分析方面,確保數(shù)據(jù)加工精準性,有效提升數(shù)據(jù)挖掘?qū)哟巍T阼F路運維體系中,采用人工智能算法,進行數(shù)據(jù)分析,以往期設(shè)備運行積存的大量數(shù)據(jù)為基礎(chǔ),高效運行人工智能算法。
數(shù)據(jù)挖掘的運行依賴于云計算技術(shù),以分布式架構(gòu)程序為基礎(chǔ),對數(shù)據(jù)資料進行高效處理,確保初始資料、處理后數(shù)據(jù)存儲的完整性。在使用數(shù)據(jù)人工分析技術(shù)時,應(yīng)對較大規(guī)模數(shù)據(jù)量,需要加強數(shù)據(jù)分析,減少數(shù)據(jù)判斷失誤問題。在使用數(shù)據(jù)挖掘技術(shù)時,能夠高效獲取事件本質(zhì)與特征。
推薦閱讀:計算機實訓(xùn)機房管理中云桌面的應(yīng)用