大數據發(fā)展歷史簡介
大數據或稱巨量資料,指的是需要新處理模式才能具有更強的決策力、洞察力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產。以下是學習啦小編為大家整理的大數據發(fā)展歷史簡介,希望能幫到你。
大數據發(fā)展歷史簡介
早在1980年,著名未來學家阿爾文·托夫勒便在《第三次浪潮》一書中,將大數據熱情地贊頌為“第三次浪潮的華彩樂章”。不過,大約從2009年開始,“大數據”才成為互聯(lián)網信息技術行業(yè)的流行詞匯。美國互聯(lián)網數據中心指出,互聯(lián)網上的數據每年將增長50%,每兩年便將翻一番,而目前世界上90%以上的數據是最近幾年才產生的。此外,數據又并非單純指人們在互聯(lián)網上發(fā)布的信息,全世界的工業(yè)設備、汽車、電表上有著無數的數碼傳感器,隨時測量和傳遞著有關位置、運動、震動、溫度、濕度乃至空氣中化學物質的變化,也產生了海量的數據信息。
2005年Hadoop項目誕生。Hadoop其最初只是雅虎公司用來解決網頁搜索問題的一個項目,后來因其技術的高效性,被ApacheSoftwareFoundation公司引入并成為開源應用。Hadoop本身不是一個產品,而是由多個軟件產品組成的一個生態(tài)系統(tǒng),這些軟件產品共同實現全面功能和靈活的大數據分析。從技術上看,Hadoop由兩項關鍵服務構成:采用Hadoop分布式文件系統(tǒng)(HDFS)的可靠數據存儲服務,以及利用一種叫做MapReduce技術的高性能并行數據處理服務。這兩項服務的共同目標是,提供一個使對結構化和復雜數據的快速、可靠分析變?yōu)楝F實的基礎。
2008年末,“大數據”得到部分美國知名計算機科學研究人員的認可,業(yè)界組織計算社區(qū)聯(lián)盟(ComputingCommunityConsortium),發(fā)表了一份有影響力的白皮書《大數據計算:在商務、科學和社會領域創(chuàng)建革命性突破》。它使人們的思維不僅局限于數據處理的機器,并提出:大數據真正重要的是新用途和新見解,而非數據本身。此組織可以說是最早提出大數據概念的機構。
2009年印度政府建立了用于身份識別管理的生物識別數據庫,聯(lián)合國全球脈沖項目已研究了對如何利用手機和社交網站的數據源來分析預測從螺旋價格到疾病爆發(fā)之類的問題。
2009年中,美國政府通過啟動Data.gov網站的方式進一步開放了數據的大門,這個網站向公眾提供各種各樣的政府數據。該網站的超過4.45萬量數據集被用于保證一些網站和智能手機應用程序來跟蹤從航班到產品召回再到特定區(qū)域內失業(yè)率的信息,這一行動激發(fā)了從肯尼亞到英國范圍內的政府們相繼推出類似舉措。
2009年,歐洲一些領先的研究型圖書館和科技信息研究機構建立了伙伴關系致力于改善在互聯(lián)網上獲取科學數據的簡易性。
2010年2月,肯尼斯?庫克爾在《經濟學人》上發(fā)表了長達14頁的大數據專題報告《數據,無所不在的數據》。庫克爾在報告中提到:“世界上有著無法想象的巨量數字信息,并以極快的速度增長。從經濟界到科學界,從政府部門到藝術領域,很多方面都已經感受到了這種巨量信息的影響。科學家和計算機工程師已經為這個現象創(chuàng)造了一個新詞匯:“大數據”。庫克爾也因此成為最早洞見大數據時代趨勢的數據科學家之一。
2011年2月,IBM的沃森超級計算機每秒可掃描并分析4TB(約2億頁文字量)的數據量,并在美國著名智力競賽電視節(jié)目《危險邊緣》“Jeopardy”上擊敗兩名人類選手而奪冠。后來紐約時報認為這一刻為一個“大數據計算的勝利。”
2011年5月,全球知名咨詢公司麥肯錫(McKinsey&Company)肯錫全球研究院(MGI)發(fā)布了一份報告——《大數據:創(chuàng)新、競爭和生產力的下一個新領域》,大數據開始備受關注,這也是專業(yè)機構第一次全方面的介紹和展望大數據。報告指出,大數據已經滲透到當今每一個行業(yè)和業(yè)務職能領域,成為重要的生產因素。人們對于海量數據的挖掘和運用,預示著新一波生產率增長和消費者盈余浪潮的到來。報告還提到,“大數據”源于數據生產和收集的能力和速度的大幅提升——由于越來越多的人、設備和傳感器通過數字網絡連接起來,產生、傳送、分享和訪問數據的能力也得到徹底變革。
2011年12月,工信部發(fā)布的物聯(lián)網十二五規(guī)劃上,把信息處理技術作為4項關鍵技術創(chuàng)新工程之一被提出來,其中包括了海量數據存儲、數據挖掘、圖像視頻智能分析,這都是大數據的重要組成部分。
2012年1月份,瑞士達沃斯召開的世界經濟論壇上,大數據是主題之一,會上發(fā)布的報告《大數據,大影響》(BigData,BigImpact)宣稱,數據已經成為一種新的經濟資產類別,就像貨幣或黃金一樣。