現在已經進入到了二十一世紀了,當今社會已經擺脫了上個世紀的那種消息滯后的時代了,我們最應該感謝的就是科學的進步為我們帶來了這么多便利。與此同時,科學的進步還為我們帶來了“大數據”這個讓人類減少了很多工作量的東西。
在這個學期的名著導讀課上我們就被要求讀:《大數據時代》這本書。《大數據時代》是國外大數據系統研究的先河之作,本書作者維克托·邁爾·舍恩伯格被譽為“大數據時代的預言家”,他是一個特別厲害的人,他作為一個教師,他曾經在哈佛大學、牛津大學、耶魯大學和新加坡國立大學等多所世界前列名校任教的經歷。他作為一個科學家,早在20xx年就在《經濟學人》上發布了長達14頁對大數據應用的前瞻性研究。他是十余年潛心研究數據科學的技術權威。他是最早洞見大數據時代發展趨勢的數據科學家之一,也是最受人尊敬的權威發言人之一。現任牛津大學網絡學院互聯網治理與監管專業教授,曾任哈佛大學肯尼迪學院信息監管科研項目負責人,哈佛國家電子商務研究中網絡監管項目負責人;曾任新加坡國立大學李光耀學院信息與創新策略研究中心主任。并擔任耶魯大學、芝加哥大學、弗吉尼亞大學、圣地亞哥大學、維也納大學的客座教授。他作為一個研究學者,他的學術成果斐然,有一百多篇論文公開發表在《科學》《自然》等著名學術期刊上,他同時也是哈佛大學出版社、麻省理工出版社、通信政策期刊、美國社會學期刊等多家出版機構的特約評論員。他是備受眾多世界知名企業信賴的信息權威與顧問。他的咨詢客戶包括微軟、惠普和IBM等全球頂級企業;
“大數據”在百度上搜索到的解釋是:稱巨量資料,指的是所涉及的資料量規模巨大到無法透過目前主流軟件工具工具,在合理時間內達到擷取、管理、處理、并整理成為幫助企業經營決策更積極目的的資訊。特點:數量、速度、品種、真實性。而舍恩伯格認為,大數據并不能定義一個確切的概念。他提到“大數據是人們獲得新的認知,創造新的價值的源泉;大數據還是改變市場、組織機構,以及政府和公民關系的方法。”這是一種更具有人文色彩和社會意義的詮釋。
大數據不僅改變了公共衛生領域,整個商業領域都因為大數據而重新洗牌。購買飛機票就是一個很好的例子。就像書中寫到20xx年,奧倫·埃齊奧尼準備乘坐從西雅圖到洛杉磯的飛機去參加弟弟的婚禮。他知道飛機票越早預訂越便宜,于是他在這個大喜日子來臨之前的幾個月,就在網上預訂了一張去洛杉磯的機票。在飛機上,埃齊奧尼好奇地問鄰座的乘客花了多少錢購買機票。當得知雖然那個人的機票比他買得更晚,但是票價卻比他便宜得多時,他感到非常氣憤。于是,他又詢問了另外幾個乘客,結果發現大家買的票居然都比他的便宜。
飛機著陸之后,埃齊奧尼下定決心要幫助人們開發一個系統,用來推測當前網頁上的機票價格是否合理。作為一種商品,同一架飛機上每個座位的價格本來不應該有差別。但實際上,價格卻千差萬別,其中緣由只有航空公司自己清楚。
埃齊奧尼表示,他不需要去解開機票價格差異的奧秘。他要做的僅僅是預測當前的機票價格在未來一段時間內會上漲還是下降。這個想法是可行的,但操作起來并不是那么簡單。這個系統需要分析所有特定航線機票的銷售價格并確定票價與提前購買天數的關系。
在信息時代,信息安全問題的日趨凸顯,數據獨裁與隱私保護之間的矛盾更是立于風口浪尖,成為眾矢之的,舍恩伯格在本書的最后章節曾試圖尋找一種解決方式來擺脫這一種困境,但最終沒能做到,但是他提出“大數據并不是一個充斥著算法的和機器的冰冷世界,人類的作用仍無法被完全代替。”這里表明人在數據時代同樣的重要,數據是為人類服務的,也就該人類驅使下完成相應的目的。在這樣的大環境下,常引起我更多的思考和擔憂。
大數據時代對于我們同是機遇與挑戰,一些國家已開始步入大數據時代的行列,并在各個領域開始研究和使用。而對于我國龐大的人口,以及較大的領土面積,都可以在大數據時代為我們提供數據的保障,而能否面臨挑戰,在大國之間的新一輪角色角逐間嶄露頭角,我們更需要解決技術等方面的問題,更應在政策上逐步開放各領域的數據,保證數據來源、權限等問題得到解決,不斷學習先進的計算機技術,縮小與其他國家的差距。
《大數據時代》這本書主要描述的是大數據時代人們生活、工作與思維各方面所遇到的重大變革,并用三個部分講述了大數據時代的思維變革、商業變革和管理變革。第一部分提出了大數據時代處理數據理念上的三大轉變:抽樣=全體;要效率不要絕對精確;要相關不要因果;第二部分作者從萬事萬物數據化和數據的巨大價值出發,闡述數據創新是驅動各行各業在大數據時代向前發展的最根本動力;最后一部分,作者描繪了大數據應用帶來的風險,包括產業生態環境、數據安全隱私、信息公正公開等問題。全文清晰的闡述了大數據的基本概念和特點,給出了作者對于大數據的明確的觀點,列舉和分析了微軟、惠普、IBM、亞馬遜、facebook、twitter、VISA等大數據先鋒們的最前沿的大數據應用案例,對大數據的價值、帶來的變革、角色定位及風險給予了清晰的預見,對于通訊運營商來說,非常具有價值。
一、大數據帶來的思維變革
主要有如下三個思維變革:(1)要分析與某事物相關的所有數據,而不是依靠分析少量的數據樣本。大數據是全數據模式,樣本=總體,紛繁的數據,越多越好。在信息處理能力受限的時代,世界需要數據分析,卻缺少用來分析所收集數據的工具,因此隨機采樣應運而生,它也可以被視為那個時代的產物。如今,計算和制表不再像過去一樣困難。感應器、手機導航、網站點擊和twitter被動地收集了大量數據,而計算機可以輕易地對這些數據進行處理。“樣本=總體”使得我們能對數據進行深度探討得到一些微觀細節的信息,獲得對某些特定子類別進行進一步研究的能力,大數據的簡單算法比小數據的復雜算法更有效。(2)大數據允許不精確。大數據放松了容錯的標準,人們掌握的數據也多了起來,還可以利用這些數據做更多新的事情,使得大量數據創造了更好的結果。學會接受不精確,這就是由“小數據”到“大數據”的重要轉變之一(3)大數據不重因果,只求相關。通過去探求“是什么”而不是“為什么”,相關關系幫助我們更好地了解了這個世界。相關關系同時它也為研究因果關系奠定了基礎。通過找出可能相關的事物,我們可以在此基礎上進行進一步的因果關系分析,如果存在因果關系的話,我們再進一步找出原因。
二、大數據帶來的商業變革
(1)一切皆可“量化”:量化一切是數據化的核心。公元前3000年,信息記錄在印度河流域、埃及和美索不達米亞平原地區就有了很大的發展。伴隨著數據記錄的發展,人類探索世界的想法一直在膨脹,我們渴望能更精準地記錄時間、距離、地點、體積和重量,等等。到了19世紀,隨著科學家們發明了新工具來測量和記錄電流、氣壓、溫度、聲頻之類的自然科學現象,科學已經離不開定量化了。計算機的出現帶來了數字測量和存儲設備,這樣就大大提高了數據化的效率,數字化帶來了數據化,萬千事物都能轉化為數據形式,滋生無窮無盡的用途。將世界看作信息,看作可以理解的數據的海洋,為我們提供了一個從未有過的審視現實的視角。它是一種可以滲透到所有生活領域的世界觀。(2)大數據的價值難以估量:無論是向公眾開放還是將其鎖在公司的保險庫中,數據的價值都難以衡量。公司賬面價值和市場價值之間的差額被記為“無形資產”。20世紀80年代中期,無形資產在美國上市公司市值中約占40%,而在2002年,這一數字已經增長為75%。無形資產早期僅包含品牌、人才和戰略這些應計入正規金融會計制度的非有形資產部分。但漸漸地,公司所持有和使用的數據也漸漸納入了無形資產的范疇。經濟正在漸漸開始圍繞數據形成,“數據是一個平臺”,因為數據是新產品和新商業模式的基石。(3)大數據決定企業競爭力:大數據成為許多公司競爭力的來源,從而使整個行業結構都改變,大公司和小公司最有可能成為贏家,而大部分中等規模的公司則可能無法在這次行業調整中嘗到甜頭。大公司收集大量的數據,將其轉化為收入,聰明而靈活的小公司能享受到非固有資產規模帶來的好處,它們可能沒有很多的固定資產但是存在感非常強,也可以低成本地傳播它們的創新成果。大大小小的公司都能從大數據中獲利,這個情況并不只是適用使用數據的公司,也適用于掌握數據的公司。
三、大數據帶來的風險
目前所采集的大部分數據都包含有個人信息,而且存在著各種各樣的誘因,讓我們想盡辦法去采集更多、存儲更久、利用更徹底。大數據的價值不再單純來源于它的基本用途,而更多源于它的二次利用。這就顛覆了當下隱私保護法以個人為中心的思想:數據收集者必須告知個人,他們收集了哪些數據、作何用途,也必須在收集工作開始之前征得個人的同意。雖然這不是進行合法數據收集的唯一方式,“告知與許可”已經是世界各地執行隱私政策的共識性基礎。更重要的是,大數據時代,很多數據在收集的時候并無意用作其他用途,而最終卻產生了很多創新性的用途。
大數據為監測我們的生活提供了便利,同時也讓保護隱私的法律手段失去了應有的效力。面對大數據,保護隱私的核心技術不再適用了。同樣,通過大數據的預測,對我們的未來想法而非實際行為采取懲罰措施,也讓我們惶恐不安。大數據帶來的影響使我們面臨更多的隱私、安全性問題,我們時刻都暴露在第三只眼之下,亞馬遜監視著我們的購物習慣,谷歌監視著我們的網頁瀏覽習慣,而微博似乎什么都知道,不僅竊聽到了我們心中的“TA”,還有我們的社交關系網 多少密碼和賬號是因為“社交網絡”流出去的?面對大數據,保護隱私的核心技術不再適用了。針對這一問題,作者提出必須杜絕對數據的過分依賴,以防我們誤用了數據而落入深淵。政府企業需要全新的制度規范,而不是修改原有規范的適用范圍。想要保護個人隱私就需要個人數據處理器對其政策和行為承擔更多的責任。同時,我們必須重新定義公正的概念,以確保人類的行為自由(也相應地為這些行為承擔責任)。新機構和專家們需要設計復雜的程序對大數據進行解讀,挖掘出其潛在的價值和結論。他們也要向那些可能受害于大數據結論的人——因之被剝奪了工作、接受醫療或貸款權利的人,提供支持。
四、大數據啟示
大數據時代是名副其實的“信息社會”,大數據在實用層面的影響很廣泛,解決了大量的日常問題。大數據更是利害攸關的,它將重塑我們的生活、工作和思維方式。擁有知識意味著掌握過去,現在則更意味著能夠預測未來。除了糾結于數據的準確性、正確性、純潔度和嚴格度之外,我們也應該容許一些不精確的存在。數據不可能是完全對或完全錯的。當數據的規模以數量級增加時,這些混亂也就算不上問題了。在日常情況下,知道“是什么”就已經足夠了,不必非要弄清楚“為什么”。大數據的相關性將人們指向了比探討因果關系更有前景的領域。對個人來說:
1、我們現在所處的時代是大數據時代,對于大數據時代賦予的便利,絕對學習并吸收;
2、明白大數據時代在隱私等諸多層面存在隱憂,對于個人重要隱私應妥善保護,減少隱私被不法分子利用的可能; 對企業來說:重視數據,重視數據庫平臺的搭建,以幫助企業快速做出正確決策,提高企業競爭力,拓展企業收入來源; 對國家來說:反對數據壟斷,學習國外數據開放與透明;