IT未來發(fā)展的趨勢智能大數(shù)據(jù)

巨量資料(big data)，或稱大數(shù)據(jù)、海量資料，指的是所涉及的資料量規(guī)模巨大到無法透過目前主流軟件工具，在合理時間內達到擷取、管理、處理、并整理成為幫助企業(yè)經(jīng)營決策更積極目的的資訊。 大數(shù)據(jù)的4V特點：Volume、Velocity、Variety、Veracity�！按髷�(shù)據(jù)”是由數(shù)量巨大、結構復雜、類型眾多數(shù)據(jù)構成的數(shù)據(jù)集合，是基于云計算的數(shù)據(jù)處理與應用模式，通過數(shù)據(jù)的整合共享，交叉復用,形成的智力資源和知識服務能力。

1 、概念
　

從技術上看，大數(shù)據(jù)[1]與云計算的關系就像一枚硬幣的正反面一樣密不可分。大數(shù)據(jù)必然無法用單臺的計算機進行處理，必須采用分布式計算架構。它的特色在于對海量數(shù)據(jù)的挖掘，但它必須依托云計算的分布式處理、分布式數(shù)據(jù)庫、云存儲和/或虛擬化技術。(在維克托·邁爾-舍恩伯格及肯尼斯·庫克耶編寫的《大數(shù)據(jù)時代[4]》中大數(shù)據(jù)指不用隨機分析法（抽樣調查）這樣的捷徑，而采用所有數(shù)據(jù)的方法）大數(shù)據(jù)的4V特點：Volume（大量）、Velocity（高速）、Variety（多樣）、Value（價值）。
        早在1980年，著名未來學家阿爾文·托夫勒便在《第三次浪潮》一書中，將大數(shù)據(jù)熱情地贊頌為“第三次浪潮的華彩樂章”。不過，大約從2009年開始，“大數(shù)據(jù)”才成為互聯(lián)網(wǎng)信息技術行業(yè)的流行詞匯。美國互聯(lián)網(wǎng)數(shù)據(jù)中心指出，互聯(lián)網(wǎng)上的數(shù)據(jù)每年將增長50%，每兩年便將翻一番，而目前世界上90%以上的數(shù)據(jù)是最近幾年才產(chǎn)生的。此外，數(shù)據(jù)又并非單純指人們在互聯(lián)網(wǎng)上發(fā)布的信息，全世界的工業(yè)設備、汽車、電表上有著無數(shù)的數(shù)碼傳感器，隨時測量和傳遞著有關位置、運動、震動、溫度、濕度乃至空氣中化學物質的變化，也產(chǎn)生了海量的數(shù)據(jù)信息。
        大數(shù)據(jù)的意義是由人類日益普及的網(wǎng)絡行為所伴生的，受到相關部門、企業(yè)采集的，蘊含數(shù)據(jù)生產(chǎn)者真實意圖、喜好的，非傳統(tǒng)結構和意義的數(shù)據(jù) 。2013年5月10日，阿里巴巴集團董事局主席馬云在淘寶十周年晚會上，將卸任阿里集團CEO的職位，并在晚會上做卸任前的演講，馬云說，大家還沒搞清PC時代的時候，移動互聯(lián)網(wǎng)來了，還沒搞清移動互聯(lián)網(wǎng)的時候，大數(shù)據(jù)時代來了。
　　借著大數(shù)據(jù)時代的熱潮，微軟公司生產(chǎn)了一款數(shù)據(jù)驅動的軟件，主要是為工程建設節(jié)約資源提高效率。在這個過程里可以為世界節(jié)約40%的能源。拋開這個軟件的前景不看，從微軟團隊致力于研究開始，可以看他們的目標不僅是為了節(jié)約了能源，更加關注智能化運營。通過跟蹤取暖器、空調、風扇以及燈光等積累下來的超大量數(shù)據(jù)，捕捉如何杜絕能源浪費�！敖o我提供一些數(shù)據(jù)，我就能做一些改變。如果給我提供所有數(shù)據(jù)，我就能拯救世界�！蔽④浭访芩惯@樣說。而智能建筑正是他的團隊專注的事情。
　　從海量數(shù)據(jù)中“提純”出有用的信息，這對網(wǎng)絡架構和數(shù)據(jù)處理能力而言也是巨大的挑戰(zhàn)。在經(jīng)歷了幾年的批判、質疑、討論、炒作之后，大數(shù)據(jù)終于迎來了屬于它的時代。2012年3月22日，奧巴馬政府宣布投資2億美元拉動大數(shù)據(jù)相關產(chǎn)業(yè)發(fā)展，將“大數(shù)據(jù)戰(zhàn)略”上升為國家戰(zhàn)略。奧巴馬政府甚至將大數(shù)據(jù)定義為“未來的新石油”。
　　大數(shù)據(jù)時代已經(jīng)來臨，它將在眾多領域掀起變革的巨浪。但我們要冷靜的看到，大數(shù)據(jù)的核心在于為客戶挖掘數(shù)據(jù)中蘊藏的價值，而不是軟硬件的堆砌。因此，針對不同領域的大數(shù)據(jù)應用模式、商業(yè)模式研究將是大數(shù)據(jù)產(chǎn)業(yè)健康發(fā)展的關鍵。我們相信，在國家的統(tǒng)籌規(guī)劃與支持下，通過各地方政府因地制宜制定大數(shù)據(jù)產(chǎn)業(yè)發(fā)展策略，通過國內外IT龍頭企業(yè)以及眾多創(chuàng)新企業(yè)的積極參與，大數(shù)據(jù)產(chǎn)業(yè)未來發(fā)展前景十分廣闊。

大數(shù)據(jù)就是互聯(lián)網(wǎng)發(fā)展到現(xiàn)今階段的一種表象或特征而已，沒有必要神話它或對它保持敬畏之心，在以云計算為代表的技術創(chuàng)新大幕的襯托下，這些原本很難收集和使用的數(shù)據(jù)開始容易被利用起來了，通過各行各業(yè)的不斷創(chuàng)新，大數(shù)據(jù)會逐步為人類創(chuàng)造更多的價值。

2、 基本介紹
　
      隨著云時代的來臨，大數(shù)據(jù)（Big data）也吸引了越來越多的關注�！吨婆_》的分析師團隊認為，大數(shù)據(jù)（Big data）通常用來形容一個公司創(chuàng)造的大量非結構化和半結構化數(shù)據(jù)，這些數(shù)據(jù)在下載到關系型數(shù)據(jù)庫用于分析時會花費過多時間和金錢。大數(shù)據(jù)分析常和云計算聯(lián)系到一起，因為實時的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。
　　簡言之，從各種各樣類型的數(shù)據(jù)中，快速獲得有價值信息的能力，就是大數(shù)據(jù)技術。明白這一點至關重要，也正是這一點促使該技術具備走向眾多企業(yè)的潛力。
　　大數(shù)據(jù)的4個“V”，或者說特點有四個層面：第一，數(shù)據(jù)體量巨大。從TB級別，躍升到PB級別；第二，數(shù)據(jù)類型繁多。前文提到的網(wǎng)絡日志、視頻、圖片、地理位置信息等等。第三，價值密度低。以視頻為例，連續(xù)不間斷監(jiān)控過程中，可能有用的數(shù)據(jù)僅僅有一兩秒。第四，處理速度快。1秒定律。最后這一點也是和傳統(tǒng)的數(shù)據(jù)挖掘技術有著本質的不同。業(yè)界將其歸納為4個“V”——Volume，Variety，Value，Velocity。
　　物聯(lián)網(wǎng)、云計算、移動互聯(lián)網(wǎng)、車聯(lián)網(wǎng)、手機、平板電腦、PC以及遍布地球各個角落的各種各樣的傳感器，無一不是數(shù)據(jù)來源或者承載的方式。
   
Francois Zimmerman，存儲專家HDS的CTO，是一位相信在現(xiàn)有科技趨勢中在創(chuàng)新方面仍有一定操作空間的IT領導者。他相信在數(shù)據(jù)使用上仍有較大的發(fā)展空間。“相對于市場炒作，這是現(xiàn)實中的實例，”他說，“商務智能，直到現(xiàn)在，一直都是時髦的新鮮事物，如大數(shù)據(jù)和廠商急于重新包裝的現(xiàn)有工具如分析系統(tǒng)�！彼oCIO們的建議是不要想尋找一個單一的、現(xiàn)成的產(chǎn)品來解決他們所關注的問題。Zimmerman說，從現(xiàn)有情況分析來看，未來的舉措將會面向更加具體的部門，以及幫助企業(yè)實時處理信息。

首席信息官應該一切以案例為導向，應用反方向思維，從需要的業(yè)務成果追溯到技術的準備工作。"他說，“信息的未來將都會是有關業(yè)務流程的分析。

 3、大數(shù)據(jù)最核心的價值
　　
大數(shù)據(jù)最核心的價值就是在于對于海量數(shù)據(jù)進行存儲和分析。相比起現(xiàn)有的其他技術而言，大數(shù)據(jù)的“廉價、迅速、優(yōu)化”這三方面的綜合成本是最優(yōu)的。

 4、大數(shù)據(jù)特點
　　第一，數(shù)據(jù)體量巨大。從TB級別，躍升到PB級別。
　　第二，數(shù)據(jù)類型繁多，如前文提到的網(wǎng)絡日志、視頻、圖片、地理位置信息，等等。
　　第三，價值密度低。以視頻為例，連續(xù)不間斷監(jiān)控過程中，可能有用的數(shù)據(jù)僅僅有一兩秒。
　　第四，處理速度快。1秒定律。最后這一點也是和傳統(tǒng)的數(shù)據(jù)挖掘技術有著本質的不同。物聯(lián)網(wǎng)、云計算、移動互聯(lián)網(wǎng)、車聯(lián)網(wǎng)、手機、平板電腦、PC以及遍布地球各個角落的各種各樣的傳感器，無一不是數(shù)據(jù)來源或者承載的方式。