大数据时代来袭中国宜加紧布局 @ 帆軟大師兄

●得大數據者得天下，是一些推崇大數據時代的變革者堅信不疑的判斷。很多專家認為，在大數據時代，誰能有效地壟斷數據，誰就有可能成為世界霸主。
　　●2009年爆發甲型H1N1流感病毒時，谷歌公司就是通過觀察人們在網上搜索的大量記錄，在流感爆發幾周前，就判斷出流感是從哪裡傳播出來的。
　　●大數據及其分析，將會在未來10年改變幾乎每一個行業的業務功能。根據麥肯錫預測，如果具備相關的IT設施、資料庫投資和分析能力等條件，大數據將在未來10年，使美國醫療市場獲得每年3000億美元的新價值。
　　2012年3月，美國奧巴馬政府發起了《大數據研究和發展倡議》，將大數據定義為「未來的新石油」，稱將斥資2億美元用於大數據研究，以應對大數據革命正在帶來的大機遇。據美國諮詢機構G artner預測，從現在起到2015年，大數據將會在世界範圍內創造440萬個工作崗位。
　　「大數據」，這一新興概念，正在被賦予極其豐富的內涵，並被寄予特別巨大的希望……大數據時代，我們該如何尋找對策，迎接挑戰？
　　人類正在邁入大數據時代
　　關於「大數據(BigD ata)」，麥肯錫全球研究所在報告《大數據：創新、競爭和生產力的下一個前沿》中定義：大數據，是指大小超出了傳統資料庫軟體工具的抓取、存儲、管理和分析能力的數據群。也有專家認為，大數據的「大」是指大型數據集，即數據量一般在10T B規模左右；多個用戶把多個數據集放在一起，形成PB級的數據量；同時，這些數據又來自多種數據源，並以實時、迭代的方式來實現，即「大數據=海量數據+複雜類型的數據」。
　　我們正處在一個數據爆發增長的時代。移動互聯網、移動終端和數據感應器的出現，使數據以超出人們想像的速度在快速增長。據國際數據資訊公司(G lobalPulse)估測，數據數量一直在快速增加，每年增長50%，這個速度不僅是指數據流的增長，而且還包括全新的數據種類的增多。據統計，全球企業2010年在硬碟上存儲了超過7E B的新數據，消費者在PC和筆記本電腦等設備上存儲了超過6EB新數據，而1E B數據就相當於美國國會圖書館中存儲數據的4000多倍。目前數據容量增長的速度，已經大大超過了硬體技術的發展速度，並正在引發數據存儲和處理的危機。
　　有研究統計，從人類文明開始到2003年，人類共創造了5T B(兆億位元組)的信息。而現在，這樣的數據量卻僅需兩天就能夠被創造出來，且速度仍在加快。數據顯示，2011年全球創建和複製的數據總量，就達到了1 .8ZB (1ZB等於10的21次方比特)，相當於全球每人產生300G B以上的數據。目前這個數字仍在快速增長，預計2020年，全球產生的數據量更將超過80ZB。由此可見，我們的確已經邁入了大數據時代。
　　世界各國加緊大數據布局
　　世界上許多國家都已經認識到了大數據所蘊含的重要戰略意義，紛紛開始在國家層面進行戰略部署，以迎接大數據技術革命，正在帶來的新機遇和新挑戰。
　　美國在《大數據研究和發展倡議》中，提出將通過收集龐大而複雜的數字資料，從中獲得知識和洞見，以提升能力。並協助加速在科學、工程上發現的步伐，強化美國國土安全，轉變教育和學習模式。根據這一計劃，美國希望利用大數據技術實現在多個領域的突破，包括科研教學、環境保護、工程技術、國土安全、生物醫藥等。其中具體的研發計劃涉及了美國國家科學基金會、國家衛生研究院、國防部、能源部、國防部高級研究局、地質勘探局等6個聯邦部門和機構。
　　英國政府2012年計劃在未來兩年內，在大數據和節能計算研究上投資1.89億英鎊，以帶動企業在該領域的投資。大數據被英國看作是自己的優勢所在，且英國認為已在政府層面，為大數據做好了準備。
　　法國政府宣布將在2013年投入1150萬歐元，用於7個大數據市場研發項目。目的在於「通過發展創新性解決方案，並將其用於實踐，來促進法國在大數據領域的發展。」法國政府在《數字化路線圖》中列出了五項將大力支持的戰略性高新技術「大數據」就是其中一項。
　　日本在2012新一輪IT振興計劃中，將發展大數據作為國家戰略層面提出，重點關注大數據應用技術，如社會化媒體等智能技術的開發、新醫療技術的開發、以及交通擁堵治理等公共領域的應用。
　　此外，加拿大、紐西蘭、德國和印度等國也在大數據領域進行了研究部署，還紛紛推出本國的公共數據開放網站，以使更多的人可以使用大數據資源，並從中獲得利益。目前，全球已經擁有大大小小的數據開放網站50餘個。
　　大數據將給世界帶來巨大衝擊
　　「大數據資源」成為重要戰略資源
　　互聯網時代，「資源」的含義正在發生極大的變化，它已不再僅僅只是指煤、石油、礦產等一些看得見、摸得著的實體「大數據」，也正在演變成不可或缺的戰略資源。互聯網、物聯網每天都在產生大量的數據，這些龐大的數據資源，為人們依據數據了解世界、了解市場、了解人們的生活提供了可能。大數據已經被視為一種資產、一種財富、一種可以被衡量和計算的價值。得大數據者得天下，是一些推崇大數據時代的變革者所堅信不疑的判斷。
　　很多專家認為，在大數據時代，誰能有效的壟斷數據，誰就有可能成為世界的霸主。2006年，微軟以1.1億美元的價格，購買了大數據公司Farecast。2008年，谷歌則以7億美元的價格，購買了為Farecast提供數據的IT A Softw are公司。
　　「大數據安全」上升為國家安全
　　傳統意義上的國家安全，是指軍隊對國家領土安全的保護，是國家之間軍事實力的較量。但在互聯網高度發達的大數據時代，網路變成了幾乎是透明的虛擬世界，也因此使國家安全的環境和內涵發生了極大的變化，對大數據的安全保存、防丟失和防破壞等問題，成為我們必須要面對的安全難題。大數據安全，已經上升成為國家安全的重要組成部分。
　　在大數據時代，數據安全的威脅隨時都有可能發生。各種國家信息基礎設施和重要機構所承載著的龐大數據信息，如由信息網路系統所控制的石油和天然氣管道、水、電力、交通、銀行、金融、商業和軍事等，都有可能成為被攻擊的目標。
　　此外，大數據也為網路恐怖分子提供了新的資源支持，有可能使恐怖分子通過網路侵入到人們工作生活的方方面面，並通過威脅、攻擊、破壞，癱瘓民用或軍事基礎設施等手段，達到其製造心理恐慌和財產損失，威脅國家安全和社會安全的目的。
　　「大數據決策」成為一種新決策方式
　　依據大數據進行決策，從數據中獲取價值，讓數據主導決策，是一種前所未有的決策方式，並正在推動著人類信息管理準則的重新定位。隨著大數據分析和預測性分析對管理決策影響力的逐漸加大，依靠直覺做決定的狀況將會被徹底改變。
　　2009年爆發的甲型H 1N 1流感病毒，谷歌公司就是通過觀察人們在網上搜索的大量記錄，在流感爆發的幾周前，就判斷出流感是從哪裡傳播出來的，從而使公共衛生機構的官員獲得了極有價值的數據信息，並做出有針對性的行動決策，而這比疾控中心的判斷，提前了一兩周。美國的Farecast系統，它的一個功能就是飛機票價預測，它通過從旅遊網站獲得的大量數據，分析41天之內的12000個價格樣本，分析所有特定航線機票的銷售價格，並預測出當前機票價格在未來一段時間內的漲降走勢，從而幫助虛擬乘客選擇最佳的購票時機，並降低可觀的購票成本。
　　「大數據應用」促進信息技術與各行業深度融合
　　有專家指出，大數據及其分析，將會在未來10年改變幾乎每一個行業的業務功能。從科學研究到醫療保險，從銀行業到互聯網，各個不同的領域都在遭遇爆髮式增長的數據量。在美國的17個行業中，已經有15個行業大公司擁有大量的數據，其平均擁有的數據量已經遠遠超過了美國國會圖書館所擁有的數據量。
　　在醫療與健康行業，根據麥肯錫預測，如果具備相關的IT設施、資料庫投資和分析能力等條件，大數據將在未來10年，使美國醫療市場獲得每年3000億美元的新價值，並削減2/3的全國醫療開支。
　　在製造業領域，製造企業為管理產品生命周期將採用IT系統，包括電腦輔助設計、工程、製造、產品開發管理工具和數字製造，製造商可以建立一個產品生命周期管理平台PLM (Product Lifecycle M an-agem ent)，從而將多種系統的數據集整合在一起，共同創造出新的產品。
　　此外，在交通、能源、材料、商業和服務等行業領域，甚至在新聞傳媒領域，也都在以大數據為發展契機，加速這些行業與信息技術的深度融合。
　　「大數據開發」推動新技術和新應用不斷湧現
　　大數據的應用需求，是大數據新技術開發的源泉。在不久的將來，也許很多原來單純依靠人類自身判斷力的領域應用，最終都將被計算機系統的數據分析和數據挖掘功能，所普遍改變甚至取代。一小片合適的信息，也許會促使創新邁進一大步；一組數據，也可能會得到數據收集人難以想像的應用，甚至可能在另一個看起來毫不相關的領域得到應用。藉助這些創新型的大數據應用，數據的能量將會層層被放大。
　　「語義網(Sem anticW eb)」，也稱為下一代互聯網，實際上就是「數據網」(Webof D ata)。語義網是一個全球的資料庫網，在這個資料庫網中，計算機可自動為用戶搜尋、檢索和集成網上的信息，而不再需要搜索引擎。大數據時代正在催生的這個最大的技術變革，就是要重新構造互聯網，打造出下一代互聯網。