然而,直到以電子計算機為代表的現代信息技術的出現,為數據處理提供了自動化的方法和手段,人類掌握和處理數據的能力才實現了質的飛躍。信息技術及其在經濟社會發展各方面的應用(即信息化)推動數據(信息)成為繼物質、能源之後的又壹重要戰略資源。
大數據在2012和2013達到宣傳高潮。2014之後,概念體系逐漸成型,認知更加理性。隨著大數據相關技術、產品、應用和標準的不斷發展,壹個由數據資源和API、開源平臺和工具、數據基礎設施、數據分析和數據應用組成的大數據生態系統逐漸形成,並不斷得到發展和完善,其發展熱點也逐漸從技術轉向應用,再轉向治理。
經過多年的發展和沈澱,人們對大數據已經形成了基本的認識。大數據現象源於信息技術的無處不在的應用,以及互聯網及其延伸帶來的信息技術的持續低成本。大數據壹般是指傳統信息技術和軟硬件工具在可容忍的時間內無法獲取、管理和處理的龐大數據集合。它具有海量性、多樣性、時效性和多變性的特點,需要壹個可擴展的計算架構來支持其存儲、處理和分析。