近兩週用業餘時間讀了《大資料時代》這本書，是聽培訓時杜威老師推薦的，我快速閱讀了一遍，覺得受到了一些啟發，發現了一些原來沒有想到看到的事情。
首先是大資料代表著資料的樣本=全體，這是一個與傳統統計學的顯著區別。大資料有能力獲得全體資料並對其進行分析。
第二就是相關性與因果性同樣重要。相關性說明了什麼事情與什麼什麼事情有關係，如商場周圍車流量的增多與商場銷售額的相關性，因果性說明什麼是什麼的原因，如睡10個小時是有精神的原因。在大資料中，相關性要比因果性容易獲得，而且相關性已經能為客戶帶來較大的收益。
第三就是大資料允許存在不精確性、混雜性，由於資料量巨大，存在少量的異變不會對結果產生任何影響，如收益是1個億與1億零1元的差別可能決策者不關心。
第四是大資料中的三個主要因素，思維、資料、技術，思維覺得你在哪些地方使用大資料。在這三個因素之中，會產生資料中間商，來處理加工資料並出售。
有人說生活像一團亂麻，剪不斷理還亂;我說生活像一團亂碼，儘管雲山霧罩惝恍迷離，最後卻總會撥雲見日雨過天晴。維克托邁爾舍恩伯格就把這團亂碼叫做大資料，在他的這本書裡，試圖給出的就是撥開雲霧見青天的玄機。
這玄機說來也簡單，就是放棄千百年來人們孜孜追求的因果關係轉而投奔相關關係。說來簡單，其實卻顛覆了多少代人對真理探求的夢想。我覺得作者是個典型的實用主義者，在美帝國主義萬惡的壓迫和洗腦下，始終追逐價效比和利益最大化，居然放棄了追求共產主義真理最基本的要求!不像我們在天朝光芒的籠罩下，從小就開始學習和追求純粹的共產主義唯心科學歷史文化知識啦!這或許就是我們永遠無法獲得諾貝爾獎、永遠無法站在科技最前沿的根本原因吧。其實國小時候，我就想過這個問題，相信所有的人都問過類似的問題，例如現在仍然很多人在問，媽的從來沒人知道我每天擺攤賺多少錢，你們他媽的那人均收入四五千是怎麼算出來的。中國是抽樣的代表，因為中國人最喜歡用代表來表現整體，最典型的例子莫過於公佈的幸福指數滿意指數各種指數永遠都高於你的預期，你完全不清楚他是怎麼來的，一直到最後彙總成三個代表，真心不清楚它到底能代表了啥。說這麼多顯得自己是個憤青，其實只是想表達“樣本=總體”這個概念在科技飛速發展的今天，在世界的不同角落，還是會體現出不同的價值，受到不同程度的對待及關注。在大資料觀念的衝擊下，我們是不是真的需要將平時關注的重點從事物內在的發展規律轉移到事物客觀的發生情況上。
大資料的出現，必然對諸多領域產生極大的衝擊，某些行業在未來十年必將會得到突飛猛進的發展，而其他一些行業則可能會消失。這是廢話，典型的三十年河東三十年河西的道理，就像三十年前的數理化王子們，現在可能蜷縮在某工廠的小角落裡顫顫巍巍的修理機器;就像三十年前職業高中的學生才學財會學銀行，如今這幫孫子一個個都開大奔養小三攢的樓房夠給自己做墓群的了;當然也不乏像生物這種專業，三十年前人們不知道是幹啥的，三十年後人們都知道沒事別去幹，唯一可惜的是我在這三十年之間的歷史長河中卻恰恰選了這麼一個專業，這也是為什麼我現在在這寫讀後感而沒有跟姑娘去玩耍的原因。其實乍一看這個題目，我首先想到的是精益生產的過程控制，比如六西格瑪，這其實就是通過對所有資料的分析來預測產品品質的變化，就已經是大資料的具體應用了。
而任何事物都會有偏差，會有錯誤，也就是說，這全部的資料中，肯定是要出現很多與總體反應出的規律相違背的個體，但是無論如何這也是該事件中一般規律的客觀體現的一種形式，要遠遠好過從選定的樣本中剔除異常值然後得到的結論。換句話說，也大大減少了排除異己對錶達事物客觀規律的影響。就好比是統計局統計中國人民的平均收入一樣，這些數怎麼這麼低啊，這不是給我們國家在國際社會上的形象抹黑麼，刪掉刪掉;這些數怎麼這麼高啊，這還不引起社會不滿國家動盪啊，刪掉刪掉。所以說，大資料至少對反應客觀事實和對客觀事實做預測這兩個方面是有非常積極地意義的。而這個新興行業所體現的商機，既在如何利用資料上，又在如何取得資料上。
先說資料的利用，這裡面表達的就是作者在通書中強調的對“相關關係”的挖掘利用。相關關係與因果關係便不再贅述，而能夠對相關關係進行挖掘利用的企業其實缺不多，因為可以相信未來的大資料庫就像現在的自然資源一樣，必將因為對利益的追逐成為稀缺資源，而最終落在個別人或企業或部門的手中。想想無論當你想要做什麼事情的時候，都有人已經提前知道並且為你做好了計劃，還真是一件甜蜜而又令人不寒而慄的事情。
而對於資料的獲取，我覺得必然是未來中小型企業甚至個人發揮極致的創造力的領域。如何在儘可能降低成本的情況下采集到越多越準確的資料是必然的發展趨勢，鑑於這三個維度事實上都無法做到極致，那麼對於資料獲取方式的爭奪肯定將成就更多的英雄人物。
現在回頭從說說作者書中的觀點中想到的，P87中關於巴斯德的疫苗的事件，描述了一個被瘋狗咬傷的小孩，在接種了巴斯德的狂犬疫苗後成功倖存，巴斯德成了英雄的故事。這是個非常有意思的案例，因為小孩被狗咬傷而患病的概率僅為七分之一，也就是說，本事件有85%的概率是小孩根本就不會患病。那麼小孩的生命到底是不是巴斯德救的，而這疫苗到底是有效沒效，通過這個事件似乎根本就沒有辦法得到驗證。這就好比某人推出個四萬億計劃，但實際上國際經濟形勢就是好轉，哪怕你只推出個二百五計劃，GDP都會蹭蹭的往上漲，而且又不會帶來四萬億導致的嚴重通脹、產能過剩、房價泡沫等問題。那你說這四萬億到底是救了國還是誤了國?回到我自己的工作領域上來，安全工作，我們一直遵循的方向都是尋找因果關係，典型的從工作前的風險評估，到調查事故的Taproot或者五個為什麼，無一不是邏輯推理得到結果的產物。而事實上，如果能做到資訊的豐富採集和彙總的話，找出事物之間的相關性，對提高工作環境的安全係數是極為有利的。這個點留著，看看可不可以在未來繼續做進一步研究。
讀完《大資料時代》這本書後，我意識到：我們即將或正在迎接由書面到電子的跳躍之後的又一重大變革。
這本書介紹了大資料時代來臨後，接踵而至的三項變革——商業變革、管理變革和思維變革。
其實，這場變革已經打響。商業領域由於大資料時代的到來而推陳出新。前幾年，一家名為Farecast的公司，讓預訂到更優惠的機票價格不再是夢想。公司利用航班售票的資料來預測未來機票價格的走勢。現在，使用這種工具的乘客，平均每張機票可以省大約50美元，這就是大資料給人們帶來的便利。
大家應該都知道20__年出現的H1N1型流感，就拿美國為例，疾控中心每週只進行一次資料統計，而病人一般都是難以忍受病痛的折磨才會去醫院就診，因此也導致了資訊的滯後。然而，對於飛速傳播的疾病，Google公司卻能及時地作出判斷，確定流感爆發的地點，這便是基於龐大的資料資源，可見大資料時代對公共衛生也產生了重大的影響!
在我看來，如果想在在大資料時代裡暢遊，不僅要學會分析，而且還要能夠大膽地決斷。
在美國，每到七、八月份時，正是颱風肆虐之時，防澇用品也擺上了商品貨架。沃爾瑪公司注意到，每到這時，一種蛋撻的銷售量較其他月份明顯增加。於是，商家作了大膽的推測，出現這樣的結果源於兩種物品的相關性，便將這種蛋撻擺在了防澇用品的旁邊。這樣的舉措大大增加了利潤，這就是屬於世界頭號零售商的大資料頭腦!
大資料時代的到來，可以讓我們的生活更加便利。但是，如果讓大資料主宰一切，也存在一定的風險。
大家應該都知道電子地圖，它可以為人們指引方向。但大家應該還不知道，它會默默地積累人們的行程資料，通過智慧分析可以推斷出哪裡是自己的家，哪裡是工作單位。我們的隱私就這樣被不為人知地收集著。
大資料時代的到來，讓我們的生活更安全，更方便，但與此同時，我們的隱私不再是隱私，資料的收集變得無所不包、無孔不入。世界已經向大資料時代邁進了一小步，一個嶄新的時代正向我們走來。讓我們用知識武裝大腦，做好準備，迎接新時代的到來!
讀完《大資料時代》這本書後，我意識到：我們即將或正在迎接由書面到電子的跳躍之後的又一重大變革。
這本書介紹了大資料時代來臨後，接踵而至的三項變革——商業變革、管理變革和思維變革。
其實，這場變革已經打響。商業領域由於大資料時代的到來而推陳出新。前幾年，一家名為Farecast的公司，讓預訂到更優惠的機票價格不再是夢想。公司利用航班售票的資料來預測未來機票價格的走勢。現在，使用這種工具的乘客，平均每張機票可以省大約50美元，這就是大資料給人們帶來的便利。
大家應該都知道20xx年出現的H1N1型流感，就拿美國為例，疾控中心每週只進行一次資料統計，而病人一般都是難以忍受病痛的折磨才會去醫院就診，因此也導致了資訊的滯後。然而，對於飛速傳播的疾病，Google公司卻能及時地作出判斷，確定流感爆發的地點，這便是基於龐大的資料資源，可見大資料時代對公共衛生也產生了重大的影響!
在我看來，如果想在在大資料時代裡暢遊，不僅要學會分析，而且還要能夠大膽地決斷。
在美國，每到七、八月份時，正是颱風肆虐之時，防澇用品也擺上了商品貨架。沃爾瑪公司注意到，每到這時，一種蛋撻的銷售量較其他月份明顯增加。於是，商家作了大膽的推測，出現這樣的結果源於兩種物品的相關性，便將這種蛋撻擺在了防澇用品的旁邊。這樣的舉措大大增加了利潤，這就是屬於世界頭號零售商的大資料頭腦!
大資料時代的到來，可以讓我們的生活更加便利。但是，如果讓大資料主宰一切，也存在一定的風險。
大家應該都知道電子地圖，它可以為人們指引方向。但大家應該還不知道，它會默默地積累人們的行程資料，通過智慧分析可以推斷出哪裡是自己的家，哪裡是工作單位。我們的隱私就這樣被不為人知地收集著。
大資料時代的到來，讓我們的生活更安全，更方便，但與此同時，我們的隱私不再是隱私，資料的收集變得無所不包、無孔不入。世界已經向大資料時代邁進了一小步，一個嶄新的時代正向我們走來。讓我們用知識武裝大腦，做好準備，迎接新時代的到來!
《大資料》是去年的一本暢銷書，在20__年的廣州南國書香節上曾有過一瞥，後來又幾次聽聞，一直想好好看看。現在是一個技術奔騰、資訊爆炸的社會，大資料這個新鮮熱辣的概念一經推出，就受到了人們極大的熱捧。這也難怪，每天都身處網路的資訊海洋中，常常會有被資料、資訊“淹沒”窒息感和無力感，不識廬山真面目，只緣身在此山中，我們向魚兒一樣亟待跳出海面，看看當下網路之海中正湧動著的大資料暗流，看看這個大家都在談論的大資料到底是個什麼東西?
書的扉頁上寫著作者塗子沛對大資料的定義：大資料(big data)指一般的軟體工具難以捕捉、管理和分析的大容量非結構資料，一般以“太位元組”為單位。構成大資料的資訊主要包括：寬頻普及帶來的巨量日誌和通訊記錄，社交網路每天不斷更新的個人資訊，視訊通訊、醫療影像、地理資訊、監控錄影等視訊記錄，感測器、導航裝置等非傳統 IT 裝置產生的資料資訊，以及持續增加的各種智慧終端產生的圖片及資訊，這些資訊呈爆炸性增長，不斷湧入網路海洋。大資料之大並不僅僅在於容量之大，更大的意義在於：通過對海量資料的交換、整合和分析，發現新的知識，創造新的價值，帶來大知識、大科技、大利潤和大發展。當然這個定義並不是唯一的，Intel試圖用視訊解說的方式告訴我們什麼是大資料：《大資料入門：大資料如何產生巨大影響力》。
這本書將美國的奧巴馬大選作為引子，從他的建立透明和開放的政府的雄心壯志講起，陽光是最好的防腐劑，資訊公開和公民社會緊密相連，從政府資訊公開化的必要性，到如何篩選、甄別、分析、管理、利用海量的政府部門的資料，因為政府部門涉及人類生活的方方面面，也就逐漸引出資訊社會大資料的概念，給我們帶來如何應對大資料時代的到來的挑戰和機遇的思考。因為這本書信奉一句至理名言：除了上帝，任何人都必須用資料說話。
麥肯錫20__年6月的全球市場報告———Big Data:The next generation frontier for innovation, competition and productivity是深入瞭解大資料發端和全貌必看的報告。
就我個人的理解而言，大資料的概念是社會資訊化深入發展的一個階段，對映到教育資訊化的領域中來，又有哪些關聯和啟示呢?專業領域中常常提到的資料探勘、個人知識管理都和此有關，學校教育過程是一個有特殊的場景、特定的事物和特殊的角色(學生、教師、教育管理者)，隨著學校的資訊化程序加快，與教育教學和學習相關的環境資料、業務資料和角色資料也將大量增加，這就是是教育領域中的大資料，如何有效獲取、篩選、管理和利用也成為挑戰和變革的機遇。
在看《大資料》之前，我只知道社會越來越數字化了，看完之後，才覺悟到：人類將迎來一個新的時代。
數字化已經把我們帶入一個資訊時代，大資料卻把我們捲進了一場科技風暴之中，這本書中，作者為我們開啟了一個更包容更廣闊的新時代，大資料把社會的方方面面融合在了一起，曾經看似因果聯絡緊密的事物，可能變得不再那麼重要;毫無關聯的事物，可能隱藏著重要的資訊，從科技、商業，到醫療、政治、教育、文化，大資料一概席捲囊括，它改變著我們的傳統思維，為這個時代注入了新鮮的血液，就像作者書中所說：“這項技術終將改變我們所居住的星球上的許多東西。”
大資料最顯著的影響是對於電子商務，通過大資料，最先洞察出潛在市場的，也必然最先佔領市場。而電子商務對實業的衝擊又是勢不可擋，可見，掌握了大資料就主導了市場，擁有了先進的科技才能擁有堅實的競爭力。在醫療方面，曾經的非典時期，就是一個很好的例證，正是有大資料的預測功能，才使疫情得到了控制。在更小的方面，他也同樣改變著我們的生活，書中提到美國著名計算機專家奧倫 · 埃齊奧尼發明了飛機機票價格預測軟體，就是利用大資料造福我們生活的很好例子。
大資料不僅節省了時間，提高了效率，更將人類帶入一個新的文明階段。從分析因果總結經驗，轉變為蒐集資料預測未來;由原來的滯後性變為現在的預見性——大大提高了人類認識世界、改造世界的能力，變被動為主動。大資料為我們掀開了歷史新紀元，不敢想象它將會為我們帶來什麼，或許會出現新奇的生活方式，從未有過的職業，聞所未聞的商業模式，百家爭鳴的文化高峰;也或許會解開更多未解之謎，探索到宇宙之外的祕密。總之，毫無疑問的是，大資料為我們帶來的未來是超乎想象的。
這本書中作者提到最多的是：改變我們的傳統思維，摒棄精確性轉向巨集觀。從總結因果轉向預測。這個世界正以驚人的速度向前發展，資料大爆炸的波及範圍遠超乎我們的想象，單純靠人類的主觀判斷力是多麼的有限，大資料早晚會取而代之這一現象，這必將影響我們的生活和工作，我們也只有認清這種趨勢，改變思維，調整步伐，緊跟時代才行。即使不能與時代同步，也儘量做到避免固步自封，認識大資料、利用大資料趨利避害，為我們的生活造福!
在看《大資料》之前，我只知道社會越來越數字化了，看完之後，才覺悟到：人類將迎來一個新的時代。
數字化已經把我們帶入一個資訊時代，大資料卻把我們捲進了一場科技風暴之中，這本書中，作者為我們開啟了一個更包容更廣闊的新時代，大資料把社會的方方面面融合在了一起，曾經看似因果聯絡緊密的事物，可能變得不再那麼重要;毫無關聯的事物，可能隱藏著重要的資訊，從科技、商業，到醫療、政治、教育、文化，大資料一概席捲囊括，它改變著我們的傳統思維，為這個時代注入了新鮮的血液，就像作者書中所說：“這項技術終將改變我們所居住的星球上的許多東西。”
大資料最顯著的影響是對於電子商務，通過大資料，最先洞察出潛在市場的，也必然最先佔領市場。而電子商務對實業的衝擊又是勢不可擋，可見，掌握了大資料就主導了市場，擁有了先進的科技才能擁有堅實的競爭力。在醫療方面，曾經的非典時期，就是一個很好的例證，正是有大資料的預測功能，才使疫情得到了控制。在更小的方面，他也同樣改變著我們的生活，書中提到美國著名計算機專家奧倫 · 埃齊奧尼發明了飛機機票價格預測軟體，就是利用大資料造福我們生活的很好例子。
大資料不僅節省了時間，提高了效率，更將人類帶入一個新的文明階段。從分析因果總結經驗，轉變為蒐集資料預測未來;由原來的滯後性變為現在的預見性——大大提高了人類認識世界、改造世界的能力，變被動為主動。大資料為我們掀開了歷史新紀元，不敢想象它將會為我們帶來什麼，或許會出現新奇的生活方式，從未有過的職業，聞所未聞的商業模式，百家爭鳴的文化高峰;也或許會解開更多未解之謎，探索到宇宙之外的祕密。總之，毫無疑問的是，大資料為我們帶來的未來是超乎想象的。
這本書中作者提到最多的是：改變我們的傳統思維，摒棄精確性轉向巨集觀。從總結因果轉向預測。這個世界正以驚人的速度向前發展，資料大爆炸的波及範圍遠超乎我們的想象，單純靠人類的主觀判斷力是多麼的有限，大資料早晚會取而代之這一現象，這必將影響我們的生活和工作，我們也只有認清這種趨勢，改變思維，調整步伐，緊跟時代才行。即使不能與時代同步，也儘量做到避免固步自封，認識大資料、利用大資料趨利避害，為我們的生活造福!
《大資料》不是一本純技術的書籍，作者用美國多年來豐富而詳細的案例說明了大資料的趨勢和發展歷程，大資料的初衷就是將一個公開、高效的政府呈現在人民眼前。書中從美國《資訊自由法》說起，其發展歷程充滿了坎坷，經過各個時期資訊自由倡議者的努力，終於出現端倪，並迅速成長，充分體現出美國政府的資訊必須被公開，以及個人的隱私必須被保護。人類可以“分析和使用”的資料在大量增加，通過這些資料的交換、整合和分析，人類可以發現新的知識，創造新的價值，帶來“大知識”、“大科技”、“大利潤”和“大發展”。
《大資料》開篇講述美國《資訊自由法》歷經多任總統，其中有支持者，也有反對者，最後終於簽發，標誌都美國進入資訊公開及隱私保護的大資料時代。現如今全世界現有60多個國家制定、實施《資訊自由法》。
隨著《資訊自由法》的頒佈，以及現代科技的發展，會產生越來越多的資料。資料主要來源是：1.各行各業通過計算機產生了大量的資料;2. 業務資料3. 民意資料4. 環境資料。並且資料在數量、速度、多樣性三個維度迅速增長，促使資料帝國逐漸興起。
有了這麼多資料，應該如何利用?
首先，在治國方面。1.循“數”管理，減少交通事故死亡人數。2.用資料進行醫療福利打假，可為政府節省開支。3.警方通過CompStat系統，分析犯罪資料，預知犯罪地點。
其次，商務智慧方面。1.資料倉庫，2.聯機分析(OLAP)，3. 資料探勘，4. 資料視覺化。
當然隨著資料的增多，如何收集和使用這些資料，就需要制訂一系列的法則。1.收集法則：減負;2.使用法則：隱私;3.釋出法則：免費，4.管理法則：質量。其中資料質量最為重要，為了保證資料質量頒佈了《資料質量法》，同時也帶來了困惑，即給商業組織帶來了質疑政府公佈資料質量的手段，對於這一手段，滿足其商業利益，是民主與商業組織之間的對抗和衝突。
同時，統一分析和使用大資料與個人隱私產生的衝突。通過中央資料銀行和全國統一ID就獲得某個人一生的行動，違反了個人隱私法，但不分析這些資訊，又可能導致危險分子的襲擊，最終以保護個人隱私勝利，但政府還是想執行統一身份認證。
奧巴馬的上任加速了政府資料開放的程序，奧巴馬上任後立即任命資訊長，由資訊長在4個月內推出政府大資料網站，在網際網路上為民眾提供開放的政府資料。陽光基金會和個人利用開放資料開發出各種分析工具，充分體現出資料價值。
但公益組織並不滿足開放資料的數量，為了讓民眾監督一個更為公正透明的政府，公益組織要求公開白宮訪客記錄，但這並不是一個簡單的要求。經過公益組織不懈的努力，白宮終於公開了訪客記錄，但公益組織發現了更多的問題，白宮也提出將繼續修改訪客記錄的方式。
大資料有效的監督了政府的公正與民主。民主不是一個結果，而是參與的過程，人民要不斷的爭取才能實現民主。
本書結尾也較詳細的描述除美國外，其它各國通過大資料走向民主的程序，充分說明了這一程序是一個大趨勢。首先，英國緊隨美國後面實施資料開放，雖然晚於美國，但發展飛快，開放的資料量已超過美國。其次，即美、英兩國開放資料之後，更多的國家也加入到其中。20__年9月20日，8個國家宣佈成立“開放政府聯盟”，要想加入需具備4個條件：1.財政透明，2.資訊自由，3.財產公開，4.公民參與。截止20__年4月25日已有50個國家加入。
在大資料時代，資料就是直接的財富，資料分析和挖掘能力就是國家、企業的核心競爭力。中國應該摘下千百年來差不多先生的標籤，儘快趕上西方國家大資料的步伐。
《大資料》不是一本純技術的書籍，作者用美國多年來豐富而詳細的案例說明了大資料的趨勢和發展歷程，大資料的初衷就是將一個公開、高效的政府呈現在人民眼前。書中從美國《資訊自由法》說起，其發展歷程充滿了坎坷，經過各個時期資訊自由倡議者的努力，終於出現端倪，並迅速成長，充分體現出美國政府的資訊必須被公開，以及個人的隱私必須被保護。人類可以“分析和使用”的資料在大量增加，通過這些資料的交換、整合和分析，人類可以發現新的知識，創造新的價值，帶來“大知識”、“大科技”、“大利潤”和“大發展”。
《大資料》開篇講述美國《資訊自由法》歷經多任總統，其中有支持者，也有反對者，最後終於簽發，標誌都美國進入資訊公開及隱私保護的大資料時代。現如今全世界現有60多個國家制定、實施《資訊自由法》。
隨著《資訊自由法》的頒佈，以及現代科技的發展，會產生越來越多的資料。資料主要來源是：1.各行各業通過計算機產生了大量的資料;2. 業務資料3. 民意資料4. 環境資料。並且資料在數量、速度、多樣性三個維度迅速增長，促使資料帝國逐漸興起。
有了這麼多資料，應該如何利用?
首先，在治國方面。1.循“數”管理，減少交通事故死亡人數。2.用資料進行醫療福利打假，可為政府節省開支。3.警方通過CompStat系統，分析犯罪資料，預知犯罪地點。
其次，商務智慧方面。1.資料倉庫，2.聯機分析(OLAP)，3. 資料探勘，4. 資料視覺化。
當然隨著資料的增多，如何收集和使用這些資料，就需要制訂一系列的法則。1.收集法則：減負;2.使用法則：隱私;3.釋出法則：免費，4.管理法則：質量。其中資料質量最為重要，為了保證資料質量頒佈了《資料質量法》，同時也帶來了困惑，即給商業組織帶來了質疑政府公佈資料質量的手段，對於這一手段，滿足其商業利益，是民主與商業組織之間的對抗和衝突。
同時，統一分析和使用大資料與個人隱私產生的衝突。通過中央資料銀行和全國統一ID就獲得某個人一生的行動，違反了個人隱私法，但不分析這些資訊，又可能導致恐怖分子的襲擊，最終以保護個人隱私勝利，但政府還是想執行統一身份認證。
奧巴馬的上任加速了政府資料開放的程序，奧巴馬上任後立即任命資訊長，由資訊長在4個月內推出政府大資料網站，在網際網路上為民眾提供開放的政府資料。陽光基金會和個人利用開放資料開發出各種分析工具，充分體現出資料價值。
但公益組織並不滿足開放資料的數量，為了讓民眾監督一個更為公正透明的政府，公益組織要求公開白宮訪客記錄，但這並不是一個簡單的要求。經過公益組織不懈的努力，白宮終於公開了訪客記錄，但公益組織發現了更多的問題，白宮也提出將繼續修改訪客記錄的方式。
大資料有效的監督了政府的公正與民主。民主不是一個結果，而是參與的過程，人民要不斷的爭取才能實現民主。
本書結尾也較詳細的描述除美國外，其它各國通過大資料走向民主的程序，充分說明了這一程序是一個大趨勢。首先，英國緊隨美國後面實施資料開放，雖然晚於美國，但發展飛快，開放的資料量已超過美國。其次，即美、英兩國開放資料之後，更多的國家也加入到其中。20xx年9月20日，8個國家宣佈成立“開放政府聯盟”，要想加入需具備4個條件：1.財政透明，2.資訊自由，3.財產公開，4.公民參與。截止20xx年4月25日已有50個國家加入。
在大資料時代，資料就是直接的財富，資料分析和挖掘能力就是國家、企業的核心競爭力。中國應該摘下千百年來差不多先生的標籤，儘快趕上西方國家大資料的步伐。
近兩週用業餘時間讀了《大資料時代》這本書，是聽培訓時杜威老師推薦的，我快速閱讀了一遍，覺得受到了一些啟發，發現了一些原來沒有想到看到的事情。
首先是大資料代表著資料的樣本=全體，這是一個與傳統統計學的顯著區別。大資料有能力獲得全體資料並對其進行分析。
第二就是相關性與因果性同樣重要。相關性說明了什麼事情與什麼什麼事情有關係，如商場周圍車流量的增多與商場銷售額的相關性，因果性說明什麼是什麼的原因，如睡10個小時是有精神的原因。在大資料中，相關性要比因果性容易獲得，而且相關性已經能為客戶帶來較大的收益。
第三就是大資料允許存在不精確性、混雜性，由於資料量巨大，存在少量的異變不會對結果產生任何影響，如收益是1個億與1億零1元的差別可能決策者不關心。
第四是大資料中的三個主要因素，思維、資料、技術，思維覺得你在哪些地方使用大資料。在這三個因素之中，會產生資料中間商，來處理加工資料並出售。
利用週末，一口氣讀完了塗子沛的大作《大資料》。這本書很好看，行文如流水，引人入勝。書中，你讀到的不是大資料技術，更多是與大資料相關的美國政治、經濟、社會和文化的演進。作為一名資訊化從業者，讀完全書，我深刻感受到了在資訊化方面中國與美國的各自特色，也看到了我們與美國的差距。有幾個方面的體會，但窺一斑基本能見全貌。
一是政府業務資料庫公開的廣度和深度。近年來，隨著我國資訊公開工作的推進，各級政府都在通過政府入口網站建設積極推進網上政務資訊公開，但我們的資訊公開，現階段還主要是政府的政策、法律法規、標準、公文通告、工作職責、辦事指南、工作動態、人事任免等行政事務性資訊的公開。當然，實時的政府業務資料庫公開也已經取得很大進步。在中國政府門戶網，可以查詢一些公益資料庫，如國家統計局的經濟統計資料、環保部資料中心提供的全國空氣、水文等資料，氣象總局提供的全國氣象資料，民航總局提供的全國航班資訊等;訪問各個部委的網站，也能查到很多業務資料，如發改委的專案立項庫、工商局的企業信用庫、國土資源部的土地證庫、國家安監總局的煤礦安全預警資訊庫、各類工程招標資訊庫等等。這是一個非常大的進步，也是這麼多年電子政務建設所取得的成效和價值!但是，政務業務資料庫中的很多資料目前還沒有實現公開，很多資料因為部門利益和“保密”等因素，還僅限於部門內部人員使用，沒有公開給公眾;已經公開的資料也僅限於一部分基本資訊和統計資訊，更多資料還沒有被公開。從《大資料》一書中記錄的美國資料公開的實踐來看，美國在資料公開的廣度和深度都比較大。
美國人認為“用納稅人的錢收集的資料應該免費提供給納稅人使用”，儘管美國政府事實上對資料的公開也有牴觸，但民願不可違，美國政府的業務資料越來越公開，尤其是在奧巴馬政府簽署《透明和開放的政府》檔案後，開放力度更加大。是美國聯盟政府新建設的統一的資料開放入口網站，網站按照原始資料、地理資料和資料應用工具來組織開放的各類資料，累積開放378529個原始和地理資料集。在中國尚沒有這樣的資料開放的網站。另外，由於制度的不同，美國業務資訊公開的深度也很大，例如，網上公佈的美國總統“白宮訪客記錄”公佈的甚至是造訪白宮的各類人員的相關資訊;美國的網站，能夠逐條跟蹤、記錄、分析聯邦政府每一筆財政支出。這在中國，目前應該還沒有實現。
二是對政府對業務資料的分析。目前，中國各級政府網站所提供的業務資料基本上還是資料表，部分網站能提供一些統計圖，但很少能實現資料的跨部門聯機分析、資料關聯分析。這主要是由於以往中國政務資訊化的建設還處於部門建設階段。美國在這方面的步伐要快一些，美國的網站，不僅提供原始資料和地理資料，還提供很多資料工具，這些工具很多都是公眾、公益組織和一些商業機構提供的，這些應用為資料處理、聯機分析、基於社交網路的關聯分析等方面提供手段。如上提供的白宮訪客搜尋工具，可以搜尋到訪客資訊，並將白宮訪客與其他微博、社交網站等進行關聯，提高訪客的透明度。
三是關於個人資料的隱私。在美國，公民的隱私和自有不可侵犯，美國沒有個人身份證，也不能建立基於個人身份證號碼的個人資訊的關聯，建立“中央資料銀行”的提案也一再被否決。這一點，在中國不是問題，每個公民有唯一的身份資訊，通過身份證資訊，可以獲取公民的基本資訊。今後，隨著國家人口基礎資料庫等基礎資源庫的建設，公民的社保、醫療等其他相關資訊也能方便獲取，當然資訊還是限於政府部門使用，但很難完全保證整合起來的這些個人資訊不被洩露或者利用。
資料是資訊化建設的基礎，兩個大國在大資料領域的互相學習和借鑑，取長補短，將推進世界進入資訊時代。我欣喜地看到，美國政府20xx年啟動了“大資料研發計劃”，投資2億美元，推動大資料提取、儲存、分析、共享、視覺化等領域的研究，並將其與超級計算和網際網路投資相提並論。同年，中國政府20xx年也批覆了“國家政務資訊化建設工程規劃”，總投資額估計在幾百億，專門有人口、法人、空間、巨集觀經濟和文化等五大資源庫的五大建設工程。開放、共享和智慧的大資料的時代已經來臨!
《大資料》不是一本純技術的書籍，作者用美國多年來豐富而詳細的案例說明了大資料的趨勢和發展歷程，大資料的初衷就是將一個公開、高效的政府呈現在人民眼前。書中從美國《資訊自由法》說起，其發展歷程充滿了坎坷，經過各個時期資訊自由倡議者的努力，終於出現端倪，並迅速成長，充分體現出美國政府的資訊必須被公開，以及個人的隱私必須被保護。人類可以“分析和使用”的資料在大量增加，通過這些資料的交換、整合和分析，人類可以發現新的知識，創造新的價值，帶來“大知識”、“大科技”、“大利潤”和“大發展”。
《大資料》開篇講述美國《資訊自由法》歷經多任總統，其中有支持者，也有反對者，最後終於簽發，標誌都美國進入資訊公開及隱私保護的大資料時代。現如今全世界現有60多個國家制定、實施《資訊自由法》。
隨著《資訊自由法》的頒佈，以及現代科技的發展，會產生越來越多的資料。資料主要來源是：1.各行各業通過計算機產生了大量的資料;2. 業務資料3. 民意資料4. 環境資料。並且資料在數量、速度、多樣性三個維度迅速增長，促使資料帝國逐漸興起。
有了這麼多資料，應該如何利用?
首先，在治國方面。1.循“數”管理，減少交通事故死亡人數。2.用資料進行醫療福利打假，可為政府節省開支。3.警方通過CompStat系統，分析犯罪資料，預知犯罪地點。
其次，商務智慧方面。1.資料倉庫，2.聯機分析(OLAP)，3. 資料探勘，4. 資料視覺化。
當然隨著資料的增多，如何收集和使用這些資料，就需要制訂一系列的法則。1.收集法則：減負;2.使用法則：隱私;3.釋出法則：免費，4.管理法則：質量。其中資料質量最為重要，為了保證資料質量頒佈了《資料質量法》，同時也帶來了困惑，即給商業組織帶來了質疑政府公佈資料質量的手段，對於這一手段，滿足其商業利益，是民主與商業組織之間的對抗和衝突。
同時，統一分析和使用大資料與個人隱私產生的衝突。通過中央資料銀行和全國統一ID就獲得某個人一生的行動，違反了個人隱私法，但不分析這些資訊，又可能導致恐怖分子的襲擊，最終以保護個人隱私勝利，但政府還是想執行統一身份認證。
奧巴馬的上任加速了政府資料開放的程序，奧巴馬上任後立即任命資訊長，由資訊長在4個月內推出政府大資料網站，在網際網路上為民眾提供開放的政府資料。陽光基金會和個人利用開放資料開發出各種分析工具，充分體現出資料價值。
但公益組織並不滿足開放資料的數量，為了讓民眾監督一個更為公正透明的政府，公益組織要求公開白宮訪客記錄，但這並不是一個簡單的要求。經過公益組織不懈的努力，白宮終於公開了訪客記錄，但公益組織發現了更多的問題，白宮也提出將繼續修改訪客記錄的方式。
大資料有效的監督了政府的公正與民主。民主不是一個結果，而是參與的過程，人民要不斷的爭取才能實現民主。
本書結尾也較詳細的描述除美國外，其它各國通過大資料走向民主的程序，充分說明了這一程序是一個大趨勢。首先，英國緊隨美國後面實施資料開放，雖然晚於美國，但發展飛快，開放的資料量已超過美國。其次，即美、英兩國開放資料之後，更多的國家也加入到其中。20xx年9月20日，8個國家宣佈成立“開放政府聯盟”，要想加入需具備4個條件：1.財政透明，2.資訊自由，3.財產公開，4.公民參與。截止20xx年4月25日已有50個國家加入。
在大資料時代，資料就是直接的財富，資料分析和挖掘能力就是國家、企業的核心競爭力。中國應該摘下千百年來差不多先生的標籤，儘快趕上西方國家大資料的步伐。
三優範文網