‧ 2014年Big Data 發展趨勢預測

作者：寬客大資料實驗室

在2014年，Big Data 將獲得迅猛發展，並有可能朝向不同的發展趨勢。以下是“大數據問答”的2014年趨勢預測。

www.eslite.com

1. Big Data火爆程度下滑。Big Data概念在上半年進入最熱，並不斷出現批評的聲音（諸如炒概念、無實質、暴隱私），在8月份左右火爆程度開始下滑。在Gartner的新興技術發展週期曲線中，Big Data將跨越過熱期的最高點進入下降階段。

2. Hadoop取得全面突破。作為Big Data的主要技術平臺之一，Hadoop將發佈重要版本；Big Data供應商都將發佈自己的Hadoop發行版本；PIG、Hive等前端工具得到易用性和性能的進一步優化；傳統資料工作者認識到Hadoop是必需掌握的技術。

3. NoSQL資料庫產品日益增多。為了滿足海量規模的非結構化資料處理，HBase、MongoDB、Redis、Cassandra等NoSQL資料庫產品受到更多重視，相關廠商將在中國設立機構或重視中國業務；更多NoSQL資料庫產品將推出，其中包括路產的據稱是NoSQL的產品；Auto-sharding、schema-less等功能愈發受到重視。

4. 分散式儲存技術面臨挑戰。share-nothing分散式儲存架構被證明並沒有那麼神奇，master-slave架構被證明有更旺盛的生命力；儲存技術本身得到更多優化，包括flash儲存、儲存運算與資料壓縮技術等；新一代儲存產品開始上市。

5. 自然語言處理技術走出迷霧。隨著Big Data的應用需求越來越旺盛，以自然語言處理為代表語義技術成為新的熱點。分詞技術重獲重視，語音翻譯、自然語言問答等技術日漸成熟；作為app的行動機器人、作為人工任務替代的虛擬助理成為熱門應用；基於自然語言的預測分析開始出現。

6. 機器學習出現有實用價值的產品。從理論上探索機器學習方法和應用領域，成為學術研究熱點；基於認知模型的機器學習、面向任務的學習系統出現值得關注的產品化趨勢；基於神經網路演算法和Big Data關聯分析的實用應用，成為某些解決方案的元件。

7. 陸產Big Data一體機成批上市。作為概念或原型產品，陸產Big Data一體機產品在急於求成的心態下紛紛上市，方式基本是封裝開源產品而宣稱自主研發，形式是獲取政府國撥資金支援或上市公司題材炒作。

8. 所有行業C級長官公開談論Big Data。許多大中企業的領導者（C-Level Leaders）在內部報告和對外溝通中，將Big Data概念作為談話題材，並引發媒體的進一步追捧，但他們私下裡會認為Big Data是不切實際的概念，很難找到Big Data與自身業務的關係。

9. 部分行業的數據應用得以深化。傳統上擁有較多數據應用的金融、電信等行業，將進一步整合數據架構，關注基於非結構化數據的分析應用，但總體上成效不大；零售、醫療、製造、教育等行業，將通過數據應用引領業務創新，並進一步深化原本較差的IT技術與應用基礎、加強數據品質和數據管控。

10. 資料科學家成為最“性感”的職業。Big Data推動資料相關的職位需求急劇增加，而實際上真正的數據人才日顯不足，使其價格不斷攀升；大量數據科學家被證實名不副實，多為技術出身的他們業務理解蒼白、理論基礎薄弱，往往在被熱捧之後被替代，後浪推前浪的跡象非常突出。

11. 互聯網公司大資料應用遭遇滑鐵盧。作為非結構化、半結構化數據占主導地位的互聯網企業，繼2012、2013年推出大量Big Data產品之後，在2014年被發現其Big Data產品大多單薄，主要原因是語義層運算和處理能力的缺失；相反地，一些創業先鋒公司和所謂傳統公司，將在Big Data應用創新中佔領鼇頭。