大數(shù)據(jù)時代的有色大數(shù)據(jù)

　　最早提出大數(shù)據(jù)時代到來的是全球知名咨詢公司麥肯錫。麥肯錫稱，數(shù)據(jù)，已經(jīng)滲透到當(dāng)今每一個行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素。人們對于海量數(shù)據(jù)的挖掘和運用，預(yù)示著新一波生產(chǎn)率增長和消費者盈余浪潮的到來。大數(shù)據(jù)在物理學(xué)、生物學(xué)、環(huán)境生態(tài)學(xué)等領(lǐng)域以及軍事、金融、通訊等行業(yè)存在已有時日，卻因為近年來互聯(lián)網(wǎng)和信息行業(yè)的發(fā)展而引起人們關(guān)注。大數(shù)據(jù)已成為云計算、物聯(lián)網(wǎng)之后IT行業(yè)又一大顛覆性的技術(shù)革命。

　　傳統(tǒng)的統(tǒng)計數(shù)據(jù)往往是通過數(shù)字來表達(dá)的，而在大數(shù)據(jù)時代，我們面臨更多的是非結(jié)構(gòu)化的數(shù)據(jù)，比如圖像、文本、日志，還有比如百度的搜索數(shù)據(jù)（百度訪問的網(wǎng)頁有幾千億個，每天處理的數(shù)據(jù)量是100個PB，這也是大數(shù)據(jù)時代一個數(shù)量級的象征）。這些數(shù)據(jù)都從微觀層面反映了社會經(jīng)濟(jì)、人們?nèi)粘Ｉ钚袨榈姆椒矫婷?。如果我們能夠把現(xiàn)有的這些數(shù)據(jù)都收集起來進(jìn)行深入的分析和挖掘，就會發(fā)現(xiàn)這些數(shù)據(jù)當(dāng)中隱藏的更深刻的規(guī)律和現(xiàn)象，就能更好地服務(wù)于政府決策和社會各方面的需求，大數(shù)據(jù)的真正價值就體現(xiàn)在這里。

　　如今，數(shù)據(jù)科學(xué)與商業(yè)智能正在發(fā)生深刻變化，不僅僅是技術(shù)和能力上。隨著大數(shù)據(jù)應(yīng)用的爆發(fā)性增長，它已經(jīng)衍生出了自己獨特的架構(gòu)，而且也直接推動了存儲、網(wǎng)絡(luò)以及計算技術(shù)的發(fā)展。給大家印象比較深的是今年1月，央視晚間新聞推出“據(jù)說春運”特別節(jié)目，首次采用百度地圖LBS定位的可視化大數(shù)據(jù)播報國內(nèi)春節(jié)人口遷徙情況。在業(yè)界看來，這正是大數(shù)據(jù)首次以普通消費者能看懂的方式被展現(xiàn)在電視屏幕上?？梢哉f，大數(shù)據(jù)時代正向我們走來。

　　從宏觀政策來看，大數(shù)據(jù)是具有國家戰(zhàn)略意義的新興產(chǎn)業(yè)?！丁笆濉眹覒?zhàn)略性新興產(chǎn)業(yè)發(fā)展規(guī)劃》中提出支持海量數(shù)據(jù)存儲、處理技術(shù)研發(fā)與產(chǎn)業(yè)化。

　　而發(fā)掘數(shù)據(jù)價值、征服數(shù)據(jù)“海洋”的動力就是云計算?；ヂ?lián)網(wǎng)時代，尤其是社交網(wǎng)絡(luò)、電子商務(wù)與移動通信把人類社會帶入了一個以“PB”（1024TB）為單位的結(jié)構(gòu)與非結(jié)構(gòu)數(shù)據(jù)信息的新時代。在云計算出現(xiàn)之前，傳統(tǒng)的計算機是無法處理如此量大、并且不規(guī)則的“非結(jié)構(gòu)數(shù)據(jù)”的。以云計算為基礎(chǔ)的信息存儲、分享和挖掘手段，可以低價、有效地將這些大量、高速、多變化的終端數(shù)據(jù)存儲下來，并隨時進(jìn)行分析與計算。通過云計算對大數(shù)據(jù)進(jìn)行分析、預(yù)測，會使得決策更為精準(zhǔn)，釋放出更多數(shù)據(jù)的隱藏價值，從而獲得更多有價值的信息。以購買飛機票為例，目前我們主要是通過增加提前預(yù)定的時間才能享受到較高的機票折扣，但是現(xiàn)實往往不是這樣，有時會在出發(fā)前一天購買到更低折扣的機票，原因可能是眾多機票代售公司在飛機起飛前一天仍然有未售出的座位，為了減少損失不得不以更低的折扣售出，所以會造成之前享受的折扣沒有比臨起飛前低的情況，這就造成提前購票折扣低的規(guī)律往往起不了作用。但如果引進(jìn)了數(shù)據(jù)分析，確實有規(guī)律可循。首先建立一個數(shù)據(jù)預(yù)測系統(tǒng)，這個預(yù)測系統(tǒng)將建立預(yù)售前一段時間（比如30天）內(nèi)價格波動樣本。價格波動，機票降價會因為很多沒賣掉的座位、季節(jié)性原因、不同航空公司、早晚差別、周六晚上不出門等因素來預(yù)測未來機票價格的走勢，通過一個數(shù)據(jù)庫，系統(tǒng)進(jìn)行預(yù)測時，預(yù)測的結(jié)果由每一條航線上每一架飛機內(nèi)的每一個座位一年內(nèi)的綜合票價紀(jì)錄而得出。最后通過可能多達(dá)幾千億條飛行數(shù)據(jù)記錄，預(yù)測出你所需要的航班最低票價。

　　有色金屬是國民經(jīng)濟(jì)發(fā)展的基礎(chǔ)材料，航空、航天、汽車、機械制造、電力、通訊、建筑、家電等絕大部分行業(yè)都以有色金屬材料為生產(chǎn)基礎(chǔ)。有色金屬工業(yè)是國家的重要產(chǎn)業(yè)部門，是國民經(jīng)濟(jì)建設(shè)的重要支柱。隨著高新技術(shù)發(fā)展，對有色金屬的產(chǎn)品結(jié)構(gòu)、產(chǎn)品質(zhì)量和數(shù)量提出了越來越高的要求，未來有色金屬行業(yè)的競爭將非常激烈，只有那些能不斷提升核心競爭力與價值的企業(yè)才能最終生存下來，并獲得豐厚的利潤，而信息化、數(shù)據(jù)庫的建立和應(yīng)用在未來企業(yè)獲得核心競爭力上將發(fā)揮至關(guān)重要的作用。

　　2013年，我國9276家規(guī)模以上有色金屬工業(yè)企業(yè)（含黃金、稀土）實現(xiàn)主營業(yè)務(wù)收入52695億元；2014年1~6月，全國十種有色金屬產(chǎn)量累計達(dá)2089萬噸。銅、鋁、鉛鋅、鈦、黃金、鎳、鎢、錫、稀土金屬、白銀、鉬、鎵、銻等幾十種有色金屬產(chǎn)品產(chǎn)量數(shù)據(jù)分析、進(jìn)出口貿(mào)易分析、區(qū)域發(fā)展分析、重點企業(yè)運營狀況分析、產(chǎn)業(yè)政策環(huán)境分析以及有色金屬股票、期貨指數(shù)預(yù)測等無不是與各種數(shù)據(jù)緊緊相連。有色金屬行業(yè)必將成為近十年大數(shù)據(jù)應(yīng)用的重要戰(zhàn)場。

　　如何建設(shè)和成就有色大數(shù)據(jù)，一是要充分利用現(xiàn)代化信息手段，特別是計算機和網(wǎng)絡(luò)技術(shù)的應(yīng)用。注重數(shù)據(jù)的采集過濾、分類分析，奠定大數(shù)據(jù)基礎(chǔ)工作；二是方法手段的更新。有色行業(yè)的信息化，不可能一步到位，而是采用最新的計算機和網(wǎng)絡(luò)技術(shù)手段逐步建立起數(shù)據(jù)庫體系。先從一個金屬品種開始，建立一個金屬品種的信息網(wǎng)和這個小行業(yè)的信息數(shù)據(jù)庫，比如可先從電解鋁開始，探索經(jīng)驗，然后逐步建立銅、鉛、鋅、鎳、錫、銻等其他金屬品種的行業(yè)信息網(wǎng)和行業(yè)數(shù)據(jù)庫，然后再把分品種的信息網(wǎng)和數(shù)據(jù)連接在一起形成有色行業(yè)的信息網(wǎng)和數(shù)據(jù)庫；三是建立有色大數(shù)據(jù)中心，就像百度在山西陽泉建立百度云計算中心，中國電信、中國移動、中國聯(lián)通在貴陽建立數(shù)據(jù)中心一樣，有色金屬行業(yè)根據(jù)實際適時適地建立大數(shù)據(jù)中心。通過數(shù)據(jù)中心對各種海量的所需數(shù)據(jù)的整合、篩選、分析、組合，最后形成終端用戶所需的數(shù)據(jù)資源。

來源：中國有色金屬報

　　版權(quán)及免責(zé)聲明：凡本網(wǎng)所屬版權(quán)作品，轉(zhuǎn)載時須獲得授權(quán)并注明來源“中國產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)”，違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章，不代表本網(wǎng)觀點和立場。版權(quán)事宜請聯(lián)系：010-65363056。

延伸閱讀