來源:學習時報 作者:張義禎
近年來大數據技術的快速發展深刻改變了我們的生活、工作和思維方式。大數據研究專家舍恩伯格指出,大數據時代,人們對待數據的思維方式會發生如下三個變化:
第一,人們處理的數據從樣本數據變成全部數據;
第二,由於是全樣本數據,人們不得不接受數據的混雜性,而放棄對精確性的追求;
第三,人類通過對大數據的處理,放棄對因果關係的渴求,轉而關注相關關係。事實上,大數據時代帶給人們的思維方式的深刻轉變遠不止上述三個方面。
筆者認為,大數據思維最關鍵的轉變在於從自然思維轉向智慧思維,使得大資料像具有生命力一樣,獲得類似於“人腦”的智慧,甚至智慧。
(一)總體思維
社會科學研究社會現象的總體特徵,以往採樣一直是主要資料獲取手段,這是人類在無法獲得總體數據資訊條件下的無奈選擇。在大數據時代,人們可以獲得與分析更多的數據,甚至是與之相關的所有數據,而不再依賴於採樣,從而可以帶來更全面的認識,可以更清楚地發現樣本無法揭示的細節資訊。
正如舍恩伯格總結道:“我們總是習慣把統計抽樣看作文明得以建立的牢固基石,就如同幾何學定理和萬有引力定律一樣。但是,統計抽樣,其實只是為了在技術受限的特定時期,解決當時存在的一些特定問題而產生的,其歷史不足一百年。
如今,技術環境已經有了很大的改善。在大數據時代進行抽樣分析就像是在汽車時代騎馬一樣。在某些特定的情況下,我們依然可以使用樣本分析法,但這不再是我們分析數據的主要方式。”
也就是說,在大數據時代,隨著數據收集、儲存、分析技術的突破性發展,我們可以更加方便、快捷、動態地獲得研究物件有關的所有資料,而不再因諸多限制不得不採用樣本研究方法,相應地,思維方式也應該從樣本思維轉向總體思維,從而能夠更加全面、立體、系統地認識總體狀況。
(二)容錯思維
在小數據時代,由於收集的樣本信息量比較少,所以必須確保記錄下來的數據儘量結構化、精確化,否則,分析得出的結論在推及總體上就會“南轅北轍”,因此,就必須十分注重精確思維。
然而,在大數據時代,得益於大數據技術的突破,大量的非結構化、異構化的資料能夠得到儲存和分析,這一方面提升了我們從數據中獲取知識和洞見的能力,另一方面也對傳統的精確思維造成了挑戰。舍恩伯格指出,“執迷於精確性是資訊缺乏時代和類比時代的產物。
只有5%的數據是結構化且能適用於傳統數據庫的。如果不接受混亂,剩下95%的非結構化數據都無法利用,只有接受不精確性,我們才能打開一扇從未涉足的世界的窗戶”。
也就是說,在大數據時代,思維方式要從精確思維轉向容錯思維,當擁有海量即時數據時,絕對的精準不再是追求的主要目標,適當忽略微觀層面上的精確度,容許一定程度的錯誤與混雜,反而可以在宏觀層面擁有更好的知識和洞察力。
(三)相關思維
在小數據世界中,人們往往執著於現象背後的因果關係,試圖通過有限樣本數據來剖析其中的內在機理。小數據的另一個缺陷,就是有限的樣本數據無法反映出事物之間的普遍性的相關關係。
而在大數據時代,人們可以通過大數據技術挖掘出事物之間隱蔽的相關關係,獲得更多的認知與洞見,運用這些認知與洞見,就可以幫助我們捕捉現在和預測未來,而建立在相關關係分析基礎上的預測正是大數據的核心議題。
通過關注線性的相關關係,以及複雜的非線性相關關係,可以説明人們看到很多以前不曾注意的聯繫,還可以掌握以前無法理解的複雜技術和社會動態,相關關係甚至可以超越因果關係,成為我們瞭解這個世界的更好視角。
舍恩伯格指出,大資料的出現讓人們放棄了對因果關係的渴求,轉而關注相關關係,人們只需知道“是什麼”,而不用知道“為什麼”。我們不必非得知道事物或現象背後的複雜深層原因,而只需要通過大數據分析獲知“是什麼”就意義非凡,這會給我們提供非常新穎且有價值的觀點、資訊和知識。
也就是說,在大數據時代,思維方式要從因果思維轉向相關思維,努力顛覆千百年來人類形成的傳統思維模式和固有偏見,才能更好地分享大數據帶來的深刻洞見。
(四)智慧思維
不斷提高機器的自動化、智慧化水準始終是人類社會長期不懈努力的方向。電腦的出現極大地推動了自動控制、人工智慧和機器學習等新技術的發展,“機器人”研發也取得了突飛猛進的成果並開始一定應用。
應該說,自進入到資訊社會以來,人類社會的自動化、智慧化水準已得到明顯提升,但始終面臨瓶頸而無法取得突破性進展,機器的思維方式仍屬於線性、簡單、物理的自然思維,智慧水準仍不盡如人意。
但是,大數據時代的到來,可以為提升機器智慧帶來契機,因為大數據將有效推進機器思維方式由自然思維轉向智慧思維,這才是大數據思維轉變的關鍵所在、核心內容。
眾所周知,人腦之所以具有智慧、智慧,就在於它能夠對周遭的資料資訊進行全面收集、邏輯判斷和歸納總結,獲得有關事物或現象的認識與見解。同樣,在大數據時代,隨著物聯網、雲端運算、社會計算、可視技術等的突破發展,大數據系統也能夠自動地搜索所有相關的資料資訊,並進而類似“人腦”一樣主動、立體、邏輯地分析資料、做出判斷、提供洞見,那麼,無疑也就具有了類似人類的智慧思維能力和預測未來的能力。
“智慧、智慧”是大數據時代的顯著特徵,大數據時代的思維方式也要求從自然思維轉向智慧思維,不斷提升機器或系統的社會計算能力和智慧化水準,從而獲得具有洞察力和新價值的東西,甚至類似於人類的“智慧”。
舍恩伯格指出,“大數據開啟了一個重大的時代轉型。就像望遠鏡讓我們感受宇宙,顯微鏡讓我們能夠觀測到微生物一樣,大數據正在改變我們的生活以及理解世界的方式,成為新發明和新服務的源泉,而更多的改變正蓄勢待發”。
大數據時代將帶來深刻的思維轉變,大數據不僅將改變每個人的日常生活和工作方式,改變商業組織和社會組織的運行方式,而且將從根本上奠定國家和社會治理的基礎資料,徹底改變長期以來國家與社會諸多領域存在的“不可治理”狀況,使得國家和社會治理更加透明、有效和智慧。不斷成為企業、社會和國家層面重要的戰略資源,成為機構的資產,成為提升機構和公司競爭力的有力武器。
來源:學習時報 作者:張義禎
近年來大數據技術的快速發展深刻改變了我們的生活、工作和思維方式。大數據研究專家舍恩伯格指出,大數據時代,人們對待數據的思維方式會發生如下三個變化:
第一,人們處理的數據從樣本數據變成全部數據;
第二,由於是全樣本數據,人們不得不接受數據的混雜性,而放棄對精確性的追求;
第三,人類通過對大數據的處理,放棄對因果關係的渴求,轉而關注相關關係。事實上,大數據時代帶給人們的思維方式的深刻轉變遠不止上述三個方面。
筆者認為,大數據思維最關鍵的轉變在於從自然思維轉向智慧思維,使得大資料像具有生命力一樣,獲得類似於“人腦”的智慧,甚至智慧。
(一)總體思維
社會科學研究社會現象的總體特徵,以往採樣一直是主要資料獲取手段,這是人類在無法獲得總體數據資訊條件下的無奈選擇。在大數據時代,人們可以獲得與分析更多的數據,甚至是與之相關的所有數據,而不再依賴於採樣,從而可以帶來更全面的認識,可以更清楚地發現樣本無法揭示的細節資訊。
正如舍恩伯格總結道:“我們總是習慣把統計抽樣看作文明得以建立的牢固基石,就如同幾何學定理和萬有引力定律一樣。但是,統計抽樣,其實只是為了在技術受限的特定時期,解決當時存在的一些特定問題而產生的,其歷史不足一百年。
如今,技術環境已經有了很大的改善。在大數據時代進行抽樣分析就像是在汽車時代騎馬一樣。在某些特定的情況下,我們依然可以使用樣本分析法,但這不再是我們分析數據的主要方式。”
也就是說,在大數據時代,隨著數據收集、儲存、分析技術的突破性發展,我們可以更加方便、快捷、動態地獲得研究物件有關的所有資料,而不再因諸多限制不得不採用樣本研究方法,相應地,思維方式也應該從樣本思維轉向總體思維,從而能夠更加全面、立體、系統地認識總體狀況。
(二)容錯思維
在小數據時代,由於收集的樣本信息量比較少,所以必須確保記錄下來的數據儘量結構化、精確化,否則,分析得出的結論在推及總體上就會“南轅北轍”,因此,就必須十分注重精確思維。
然而,在大數據時代,得益於大數據技術的突破,大量的非結構化、異構化的資料能夠得到儲存和分析,這一方面提升了我們從數據中獲取知識和洞見的能力,另一方面也對傳統的精確思維造成了挑戰。舍恩伯格指出,“執迷於精確性是資訊缺乏時代和類比時代的產物。
只有5%的數據是結構化且能適用於傳統數據庫的。如果不接受混亂,剩下95%的非結構化數據都無法利用,只有接受不精確性,我們才能打開一扇從未涉足的世界的窗戶”。
也就是說,在大數據時代,思維方式要從精確思維轉向容錯思維,當擁有海量即時數據時,絕對的精準不再是追求的主要目標,適當忽略微觀層面上的精確度,容許一定程度的錯誤與混雜,反而可以在宏觀層面擁有更好的知識和洞察力。
(三)相關思維
在小數據世界中,人們往往執著於現象背後的因果關係,試圖通過有限樣本數據來剖析其中的內在機理。小數據的另一個缺陷,就是有限的樣本數據無法反映出事物之間的普遍性的相關關係。
而在大數據時代,人們可以通過大數據技術挖掘出事物之間隱蔽的相關關係,獲得更多的認知與洞見,運用這些認知與洞見,就可以幫助我們捕捉現在和預測未來,而建立在相關關係分析基礎上的預測正是大數據的核心議題。
通過關注線性的相關關係,以及複雜的非線性相關關係,可以説明人們看到很多以前不曾注意的聯繫,還可以掌握以前無法理解的複雜技術和社會動態,相關關係甚至可以超越因果關係,成為我們瞭解這個世界的更好視角。
舍恩伯格指出,大資料的出現讓人們放棄了對因果關係的渴求,轉而關注相關關係,人們只需知道“是什麼”,而不用知道“為什麼”。我們不必非得知道事物或現象背後的複雜深層原因,而只需要通過大數據分析獲知“是什麼”就意義非凡,這會給我們提供非常新穎且有價值的觀點、資訊和知識。
也就是說,在大數據時代,思維方式要從因果思維轉向相關思維,努力顛覆千百年來人類形成的傳統思維模式和固有偏見,才能更好地分享大數據帶來的深刻洞見。
(四)智慧思維
不斷提高機器的自動化、智慧化水準始終是人類社會長期不懈努力的方向。電腦的出現極大地推動了自動控制、人工智慧和機器學習等新技術的發展,“機器人”研發也取得了突飛猛進的成果並開始一定應用。
應該說,自進入到資訊社會以來,人類社會的自動化、智慧化水準已得到明顯提升,但始終面臨瓶頸而無法取得突破性進展,機器的思維方式仍屬於線性、簡單、物理的自然思維,智慧水準仍不盡如人意。
但是,大數據時代的到來,可以為提升機器智慧帶來契機,因為大數據將有效推進機器思維方式由自然思維轉向智慧思維,這才是大數據思維轉變的關鍵所在、核心內容。
眾所周知,人腦之所以具有智慧、智慧,就在於它能夠對周遭的資料資訊進行全面收集、邏輯判斷和歸納總結,獲得有關事物或現象的認識與見解。同樣,在大數據時代,隨著物聯網、雲端運算、社會計算、可視技術等的突破發展,大數據系統也能夠自動地搜索所有相關的資料資訊,並進而類似“人腦”一樣主動、立體、邏輯地分析資料、做出判斷、提供洞見,那麼,無疑也就具有了類似人類的智慧思維能力和預測未來的能力。
“智慧、智慧”是大數據時代的顯著特徵,大數據時代的思維方式也要求從自然思維轉向智慧思維,不斷提升機器或系統的社會計算能力和智慧化水準,從而獲得具有洞察力和新價值的東西,甚至類似於人類的“智慧”。
舍恩伯格指出,“大數據開啟了一個重大的時代轉型。就像望遠鏡讓我們感受宇宙,顯微鏡讓我們能夠觀測到微生物一樣,大數據正在改變我們的生活以及理解世界的方式,成為新發明和新服務的源泉,而更多的改變正蓄勢待發”。
大數據時代將帶來深刻的思維轉變,大數據不僅將改變每個人的日常生活和工作方式,改變商業組織和社會組織的運行方式,而且將從根本上奠定國家和社會治理的基礎資料,徹底改變長期以來國家與社會諸多領域存在的“不可治理”狀況,使得國家和社會治理更加透明、有效和智慧。不斷成為企業、社會和國家層面重要的戰略資源,成為機構的資產,成為提升機構和公司競爭力的有力武器。
0 comments:
張貼留言