對大數(shù)據(jù)的理解與思考

2013-10-17 10:26:56 EP電力信息化網　點擊量：評論 (0)

首先，大數(shù)據(jù)的到來，對人們的觀念將帶來深遠的影響。我們以前習慣認為：找到現(xiàn)象背后的原因，比清楚現(xiàn)象是什么更重要。通過塔吉特懷孕預測的例子可以看到，通過關聯(lián)分析、聚類分析等數(shù)據(jù)挖掘方

首先，大數(shù)據(jù)的到來，對人們的觀念將帶來深遠的影響。

我們以前習慣認為：找到現(xiàn)象背后的原因，比清楚現(xiàn)象是什么更重要。通過“塔吉特懷孕預測”的例子可以看到，通過關聯(lián)分析、聚類分析等數(shù)據(jù)挖掘方法，大家很容易找到事物之間的關系。但是，這些大數(shù)據(jù)分析結果，并不會直接告訴我們，事物之間為什么存在這些關系。在不清楚為什么存在這些關系之前，又的確看到了這些關系帶來了價值；所以，在大數(shù)據(jù)應用領域就需要改變以前的思考方。即：先找到“是什么”再去找“為什么”；清楚是什么，與搞清楚為什么同等重要。

手工統(tǒng)計時代，出于收集全部數(shù)據(jù)非常困難或代價巨大的原因，很多數(shù)據(jù)分析都是采用抽樣數(shù)據(jù)；但是，現(xiàn)在不同了，隨著信息技術的發(fā)展，現(xiàn)在很多領域都能夠方便的收集到全量數(shù)據(jù)。諸如無紙化辦公的興起、信息系統(tǒng)的使用、電子商務的發(fā)展等等，都為收集全量數(shù)據(jù)提供了便捷的條件。那么，這時候數(shù)據(jù)的“樣本”=“全體數(shù)據(jù)”。這相對以前來說，也是革命性的影響。

在抽樣分析時代，個別樣本的質量甚至決定結果的質量。在大數(shù)據(jù)時代，這也變了，可以允許個別數(shù)據(jù)的不精確，甚至錯誤。舉個簡單例子來說明這個道理，比如在溫室大棚里放一只溫度計，當這只溫度計有問題時，整個溫度都是不準確的。若在大棚里均勻分布十幾只溫度計，其中一只有問題，對溫室大棚溫度的統(tǒng)計結果無礙大事，基本可以忽略其影響。

其次，大數(shù)據(jù)應用，影響商業(yè)變革和社會進步。

大數(shù)據(jù)應用正改變著企業(yè)的業(yè)務發(fā)展方式。比如：京東、天貓通過對交易數(shù)據(jù)的“二次利用”，尋找目標客戶、定向推薦商品。也正是這些數(shù)據(jù)的二次利用給他們提供了大量價值，促進了這些企業(yè)的發(fā)展，推動著他們在營銷、供應鏈與客戶服務等領域的管理變革。同時，交易數(shù)據(jù)并不因為二次利用，而降低其價值；這也是，大數(shù)據(jù)應用與傳統(tǒng)資源使用不同的地方。

數(shù)據(jù)的“混搭”分析，推動著商業(yè)發(fā)展和社會的進步。比如歷史天氣信息與航班誤點信息，這兩個不同領域的信息一塊兒分析，便可以推算未來幾天航班的誤點率。再比如，通過神經中樞腫瘤患病率和手機使用時間長短之間的大數(shù)據(jù)關聯(lián)分析，來研究神經中樞腫瘤患病率是否與手機使用時間長短有關系等等。

大數(shù)據(jù)的應用，也促生了很多商業(yè)機會。隨著大數(shù)據(jù)時代的到來，形成了很多大數(shù)據(jù)擁有公司，以及大數(shù)據(jù)技術公司；數(shù)據(jù)與技術的結合變促生了很多大數(shù)據(jù)應用，因此帶來了很多商業(yè)機會。例如，現(xiàn)在很多商業(yè)銀行對自己大量客戶的交易信息分析，規(guī)劃新的理財產品，與其他商家合作，聯(lián)合搞定向促銷等等。

再次，大數(shù)據(jù)時代不再有個人隱私，將形成新的信息安全機制。

現(xiàn)在還經常聽到諸如某某窺探我的隱私之類的話語，但是，在大數(shù)據(jù)時代幾乎沒有個人隱私，這不是駭人聽聞。因為，現(xiàn)在微博、搜索引擎、社交網絡、電商購物，已經成了我們生活中必不可少的一部分。根據(jù)每個人在互聯(lián)網上留下的痕跡，通過大數(shù)據(jù)分析，很容易分析出一個人的愛好、習慣、性格、癖好等等。所以，大家都被“第三只眼”實時監(jiān)控著，在大數(shù)據(jù)時代，幾乎沒有個人隱私！

沒有個人隱私，是否就代表每個人可以隨便傳播別人隱私了呢？答案當然是否定的。因為傳播別人隱私是不道德的，甚至是違法的。所以，現(xiàn)在新的信息安全規(guī)則正在重新定位，其中一個基調是：讓數(shù)據(jù)使用者承擔責任，不能濫用別人的隱私；我個人感覺這也比較合理。