大數(shù)據(jù)學習心得
大數(shù)據(jù)學習心得
大數(shù)據(jù)中的“大”不是絕對意義上的大，雖然在大多數(shù)情況下是這個意思。大數(shù)據(jù)是指不用隨機分析法這樣的捷徑，而采用所有數(shù)據(jù)的方法。 下面是學習啦小編為大家收集整理的大數(shù)據(jù)學習心得，歡迎大家閱讀。
大數(shù)據(jù)學習心得篇1
大數(shù)據(jù)時代已經(jīng)悄然到來，如何應對大數(shù)據(jù)時代帶來的挑戰(zhàn)與機遇，是我們當代大學生特別是我們計算機類專業(yè)的大學生的一個必須面對的嚴峻課題。大數(shù)據(jù)時代是我們的一個黃金時代，對我們的意義可以說就像是另一個“80年代”。 在講座中秦永彬博士由一個電視劇《大太監(jiān)》中情節(jié)來深入淺出的簡單介紹了“大數(shù)據(jù)”的基本概念，并由“塔吉特”與“犯罪預測”兩個案例讓我們深切的體會到了“大數(shù)據(jù)”的對現(xiàn)今這樣一個信息時代的不可替代的巨大作用。
在前幾年本世紀初的時候，世界都稱本世紀為“信息世紀”。確實在計算機技術與互聯(lián)網(wǎng)技術的飛速發(fā)展過后，我們面臨了一個每天都可以“信息爆炸”的時代。打開電視，打開電腦，甚至是在街上打開手機、PDA、平板電腦等等，你都可以接收到來自互聯(lián)網(wǎng)從世界各地上傳的各類信息：數(shù)據(jù)、視頻、圖片、音頻……這樣各類大量的數(shù)據(jù)累積之后達到了引起量變的臨界值，數(shù)據(jù)本身有潛在的價值，但價值比較分散;數(shù)據(jù)高速產(chǎn)生，需高速處理。大數(shù)據(jù)意味著包括交易和交互數(shù)據(jù)集在內(nèi)的所有數(shù)據(jù)集，其規(guī)?；驈碗s程度超出了常用技術按照合理的成本和時限捕捉、管理及處理這些數(shù)據(jù)集的能力。遂有了“大數(shù)據(jù)”技術的應運而生。
現(xiàn)在，當數(shù)據(jù)的積累量足夠大的時候到來時，量變引起了質(zhì)變。“大數(shù)據(jù)”通過對海量數(shù)據(jù)有針對性的分析，賦予了互聯(lián)網(wǎng)“智商”，這使得互聯(lián)網(wǎng)的作用，從簡單的數(shù)據(jù)交流和信息傳遞，上升到基于海量數(shù)據(jù)的分析，一句話“他開始思考了”。簡言之，大數(shù)據(jù)就是將碎片化的海量數(shù)據(jù)在一定的時間內(nèi)完成篩選、分析，并整理成為有用的資訊，幫助用戶完成決策。借助大數(shù)據(jù)企業(yè)的決策者可以迅速感知市場需求變化，從而促使他們作出對企業(yè)更有利的決策，使得這些企業(yè)擁有更強的創(chuàng)新力和競爭力。這是繼云計算、物聯(lián)網(wǎng)之后IT產(chǎn)業(yè)又一次顛覆性的技術變革，對國家治理模式、對企業(yè)的決策、組織和業(yè)務流程、對個人生活方式都將產(chǎn)生巨大的影響。后工業(yè)社會時代，隨著新興技術的發(fā)展與互聯(lián)網(wǎng)底層技術的革新，數(shù)據(jù)正在呈指數(shù)級增長，所有數(shù)據(jù)的產(chǎn)生形式，都是數(shù)字化。如何收集、管理和分析海量數(shù)據(jù)對于企業(yè)從事的一切商業(yè)活動都顯得尤為重要。
大數(shù)據(jù)時代是信息化社會發(fā)展必然趨勢，我們只有緊緊跟隨時代發(fā)展的潮流，在技術上、制度上、價值觀念上做出迅速調(diào)整并牢牢跟進，才能在接下來新一輪的競爭中擺脫受制于人的弱勢境地，才能把握發(fā)展的方向。
首先，“大數(shù)據(jù)”究竟是什么?它有什么用?這是當下每個人初接觸“大數(shù)據(jù)”都會有的疑問，而這些疑問在秦博士的講座中我們都了解到了。“大數(shù)據(jù)”的“大”不僅是單單純純指數(shù)量上的“大”，而是在諸多方面上闡釋了“大”的含義，是體現(xiàn)在數(shù)據(jù)信息是海量信息，且在動態(tài)變化和不斷增長之上。同時“大數(shù)據(jù)”在：速度(Velocity)、多樣性(Variety)、價值密度(Value)、體量(Volume)這四方面(4v)都有體現(xiàn)。其實“大數(shù)據(jù)”歸根結(jié)底還是數(shù)據(jù)，其是一種泛化的數(shù)據(jù)描述形式，有別于以往對于數(shù)據(jù)信息的表達，大數(shù)據(jù)更多地傾向于表達網(wǎng)絡用戶信息、新聞信息、銀行數(shù)據(jù)信息、社交媒體上的數(shù)據(jù)信息、購物網(wǎng)站上的用戶數(shù)據(jù)信息、規(guī)模超過TB級的數(shù)據(jù)信息等。
了解了“大數(shù)據(jù)”的“大”之后我們也該了解它所具有的巨大價值。就目前來說“大數(shù)據(jù)”的來源主要還是互聯(lián)網(wǎng)，來自互聯(lián)網(wǎng)上的大多數(shù)不被重視信息都是具有巨大開發(fā)價值的，
其具有巨“大”的商業(yè)價值，我們所缺少的只是一些數(shù)據(jù)分析等手段。例如：在如今，網(wǎng)購已經(jīng)成為了一種風潮，網(wǎng)上也涌現(xiàn)了以淘寶、京東、亞馬遜等一系列的購物網(wǎng)站。而在這些網(wǎng)站之中，顧客的瀏覽記錄，購買記錄等等都是一些巨大商業(yè)價值的信息。借鑒“塔吉特”的先例，我們可以利用“大數(shù)據(jù)”技術收集分析，就可預測需求、供給和顧客習慣等，做到精準采購、精準投放，達到利益放大的效果。 從全球范圍來看，很多人都把2012年看做是大數(shù)據(jù)時代的元年。在這一年里，很多行業(yè)在大數(shù)據(jù)方面的管理、規(guī)劃和應用已經(jīng)覺醒。電商、金融、電信等行業(yè)數(shù)據(jù)有著長期的數(shù)據(jù)積累。事實上，很多互聯(lián)網(wǎng)公司，例如亞馬遜、Google、騰訊，更愿意將自己定位為數(shù)據(jù)企業(yè)。因為信息時代，數(shù)據(jù)成為經(jīng)營決策的強有力依據(jù)，給企業(yè)帶來了發(fā)展和引領行業(yè)的機遇。銀行也同樣擁有豐富的數(shù)據(jù)礦藏，不僅存儲處理了大量結(jié)構化的賬務數(shù)據(jù)，而且隨著銀行渠道快速滲透到社交網(wǎng)絡、移動端等媒介，海量的非結(jié)構化數(shù)據(jù)也在等待被收集和分析。未來的金融業(yè)將更多地受到科技創(chuàng)新力的驅(qū)動，也越來越傾向于零售營銷：對于金融業(yè)來說，大數(shù)據(jù)意味著巨大的商機，可強化客戶體驗，提高客戶忠誠度。大數(shù)據(jù)技術的發(fā)展帶來企業(yè)經(jīng)營決策模式的轉(zhuǎn)變，驅(qū)動著行業(yè)變革，衍生出新的商機和發(fā)展契機。駕馭大數(shù)據(jù)的能力已被證實為領軍企業(yè)的核心競爭力，這種能力能夠幫助企業(yè)打破數(shù)據(jù)邊界，繪制企業(yè)運營全景視圖，做出最優(yōu)的商業(yè)決策和發(fā)展戰(zhàn)略。金融行業(yè)在大數(shù)據(jù)浪潮中，要以大數(shù)據(jù)平臺建設為基礎，夯實大數(shù)據(jù)的收集、存儲、處理能力;重點推進大數(shù)據(jù)人才的梯隊建設，打造專業(yè)、高效、靈活的大數(shù)據(jù)分析團隊;不斷提升企業(yè)智商，挖掘海量數(shù)據(jù)的商業(yè)價值，從而在數(shù)據(jù)新浪潮的變革中拔得頭籌，贏得先機
在如此快速的到來的大數(shù)據(jù)革命時代，我們還有很多知識需要學習，許多思維需要轉(zhuǎn)變，許多技術需要研究。職業(yè)規(guī)劃中，也需充分考慮到大數(shù)據(jù)對于自身職業(yè)的未來發(fā)展所帶來的機遇和挑戰(zhàn)。當我們掌握大量數(shù)據(jù)，需要考慮有多少數(shù)字化的數(shù)據(jù)，又有哪些可以通過大數(shù)據(jù)的分析處理而帶來有價值的用途?在大數(shù)據(jù)時代制勝的良藥也許是創(chuàng)新的點子，也許可以利用外部的數(shù)據(jù)，通過多維化、多層面的分析給我們?nèi)蘸髣?chuàng)業(yè)帶來價值。借力，順勢，合作共贏。把自己的心門打開，像海綿般吸取積極、正能量的東西。
大數(shù)據(jù)學習心得篇2
4月13日下午，在湖南大學東樓205參加了關于《大數(shù)據(jù)時代》的讀書交流活動。通過相互交流學習，使我更深層次的理解了大數(shù)據(jù)時代的利與弊，機遇和挑戰(zhàn)。在寫心得體會前，我想再重新審視一下關于大數(shù)據(jù)的歷史沿革和現(xiàn)實意義。
一、大數(shù)據(jù)的歷史沿革及現(xiàn)實意義
首先，最早提出“大數(shù)據(jù)”時代到來的是全球知名咨詢公司麥肯錫，麥肯錫稱：“數(shù)據(jù)，已經(jīng)滲透到當今每一個行業(yè)和業(yè)務職能領域，成為重要的生產(chǎn)因素。人們對于海量數(shù) 據(jù)的挖掘和運用，預示著新一波生產(chǎn)率增長和消費者盈余浪潮的到來。”“大數(shù)據(jù)”在物理學、生物學、環(huán)境生態(tài)學等領域以及軍事、金融、通訊等行業(yè)存在已有時日，卻因為近年來互聯(lián)網(wǎng)和信息行業(yè)的發(fā)展而引起人們關注。大數(shù)據(jù)作為云計算、物聯(lián)網(wǎng)之后又IT行業(yè)又一大顛覆性的技術革命。云計算主要為數(shù)據(jù)資產(chǎn)提供了保管、訪問的場所和渠道，而數(shù)據(jù)才是真正有價值的資產(chǎn)。企業(yè)內(nèi)部的經(jīng)營交易信息、物聯(lián)網(wǎng)世界中的商品物流信息，互聯(lián)網(wǎng)世界中的人與人交互信息、位置信息等，其數(shù)量將遠遠超越現(xiàn)有企業(yè)IT架構和基礎設施的承載能力，實時性要求也將大大超越現(xiàn)有的計算能力。如何盤活這些數(shù)據(jù)資產(chǎn)，使其為國家治理、企業(yè)決策乃至個人生活服務，是大數(shù)據(jù)的核心議題，也是云計算內(nèi)在的靈魂和必然的升級方向。
其次，進入2012年，大數(shù)據(jù)(big data)一詞越來越多地被提及，人們用它來描述和定義信息爆炸時代產(chǎn)生的海量數(shù)據(jù)，并命名與之相關的技術發(fā)展與創(chuàng)新。它已經(jīng)上過《紐約時報》《華爾街日報》的專欄封面，進入美國白宮官網(wǎng)的新聞，現(xiàn)身在國內(nèi)一些互聯(lián)網(wǎng)主題的講座沙龍中，甚至被嗅覺靈敏的國金證券、國泰君安、銀河證券等寫進了投資推薦報告。數(shù)據(jù)正在迅速膨脹并變大，它決定著企業(yè)的未來發(fā)展，雖然很多企業(yè)可能并沒有意識到數(shù)據(jù)爆炸性增長帶來問題的隱患，但是隨著時間的推移，人們將越來越多的意識到數(shù)據(jù)對企業(yè)的重要性。正如《紐約時報》2012年2月的一篇專欄中所稱，“大數(shù)據(jù)”時代已經(jīng)降臨，在商業(yè)、經(jīng)濟及其他領域中，決策將日益基于數(shù)據(jù)和分析而作出，而并非基于經(jīng)驗和直覺。哈佛大學社會學教授加里·金說：“這是一場革命，龐大的數(shù)據(jù)資源使得各個領域開始了量化進程，無論學術界、商界還是政府，所有領域都將開始這種進程。”
最后，隨著云時代的來臨，大數(shù)據(jù)(Big data)也吸引了越來越多的關注。著云臺的分析師團隊認為，大數(shù)據(jù)(Big data)通常用來形容一個公司創(chuàng)造的大量非結(jié)構化和半結(jié)構化數(shù)據(jù)，這些數(shù)據(jù)在下載到關系型數(shù)據(jù)庫用于分析時會花費過多時間和金錢。大數(shù)據(jù)分析常和云計算聯(lián)系到一起，因為實時的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。“大數(shù)據(jù)”在互聯(lián)網(wǎng)行業(yè)指的是這樣一種現(xiàn)象：互聯(lián)網(wǎng)公司在日常運營中生成、累積的用戶網(wǎng)絡行為數(shù)據(jù)。這些數(shù)據(jù)的規(guī)模是如此龐大，以至于不能用G或T來衡量。大數(shù)據(jù)到底有多大?一組名為“互聯(lián)網(wǎng)上一天”的數(shù)據(jù)告訴我們，一天之中，互聯(lián)網(wǎng)產(chǎn)生的全部內(nèi)容可以刻滿1.68億張DVD;發(fā)出的郵件有2940億封之多(相當于美國兩年的紙質(zhì)信件數(shù)量);發(fā)出的社區(qū)帖子達200萬個(相當于《時代》雜志770年的文字量);賣出的手機為37.8萬臺，高于全球每天出生的嬰兒數(shù)量37.1萬……，截止到2012年，數(shù)據(jù)量已經(jīng)從TB(1024GB=1TB)級別躍升到PB(1024TB=1PB)、EB(1024PB=1EB)乃至ZB(1024EB=1ZB)級別。國際數(shù)據(jù)公司(IDC)的研究結(jié)果表明，2008年全球產(chǎn)生的數(shù)據(jù)量為0.49ZB，2009年的數(shù)據(jù)量為0.8ZB，2010年增長為1.2ZB，2011年的數(shù)量更是高達1.82ZB，相當于全球每人產(chǎn)生200GB以上的數(shù)據(jù)。而到2012年為止，人類生產(chǎn)的所有印刷材料的數(shù)據(jù)量是200PB，全人類歷史上說過的所有話的數(shù)據(jù)量大約是5EB。IBM的研究稱，整個人類文明所獲得的全部數(shù)據(jù)中，有90%是過去兩年內(nèi)產(chǎn)生的。而到了2020年，全世界所產(chǎn)生的數(shù)據(jù)規(guī)模將達到今天的44倍。
二、讀書心得體會
首先，談談大數(shù)據(jù)帶給生活的轉(zhuǎn)變。大數(shù)據(jù)已經(jīng)是信息產(chǎn)業(yè)發(fā)展的必然趨勢，可以說，大數(shù)據(jù)現(xiàn)在已經(jīng)開始慢慢滲透入我們的生活，如：現(xiàn)在流行的打車軟件、三維立體化社區(qū)的建立、某些從事生產(chǎn)銷售的行業(yè)利用大數(shù)據(jù)來優(yōu)化規(guī)模和實現(xiàn)利益最大化。而我們很多人對大數(shù)據(jù)還很陌生，只是被動的適應著大數(shù)據(jù)給生活帶來的改變。大數(shù)據(jù)時代是以云計算為基礎的，所以，要實現(xiàn)大數(shù)據(jù)，相關的很多的硬件設備都要更新?lián)Q代，信息處理系統(tǒng)、信息傳輸系統(tǒng)、信息反饋系統(tǒng)、信息決策系統(tǒng)都將面臨新的挑戰(zhàn)，相關產(chǎn)業(yè)都要重新調(diào)整產(chǎn)業(yè)結(jié)構，在那時，可以夸張的說，信息就是黃金，信息就是石油。大數(shù)據(jù)時代的到來會解放更多的勞動生產(chǎn)力，勢必將會更加加劇生產(chǎn)力過剩的現(xiàn)狀，社會兩極分化現(xiàn)象會更加明顯，掌握不了信息資源，很難再翻身，要防止信息壟斷帶來的可怕局面。大數(shù)據(jù)時代的到來會使人們的生活節(jié)奏急速加快，信息的時效性決定了它的流通速率，人們的生活節(jié)奏要跟上信息流通的速率，就不得不加快自己的節(jié)奏，人們會越來越忙，到那時，就像現(xiàn)在的日本，可能想找個人聽你說說話，真的是一件很難的事。
第二，關于數(shù)據(jù)管理的看法。大數(shù)據(jù)時代，數(shù)據(jù)管理是一件很重要的工作，如何才能避免自己的數(shù)據(jù)被非法竊取、丟失和被盜?我的看法是，人防、技防、物防一體化。人防，即我們要從思想上牢固樹立信息安全防范的意識，不主動泄露信息，要管理好自己身邊的信息設備;技防，就是要運用軟件來管理和處理數(shù)據(jù)，經(jīng)常檢查更新數(shù)據(jù)庫，定時查殺電腦病毒，確保電腦狀況安全;物防，就是重要的數(shù)據(jù)一定要備份保留，而且應當做到備份與原始文件是物理隔離，無關的信息應當及時刪除，減輕硬盤的壓力。
三、怎么保護自己的隱私。隱私，顧名思義，就是不愿意讓別人看到的東西，所以，在大數(shù)據(jù)時代，更要管理好自己的隱私，以免對自己和家人造成麻煩和損失。越是隱私的信息，越要遠離網(wǎng)絡，不要再公開的社交網(wǎng)絡儲存和展示個人圖片、資料等信息，免得被非法人士采用和竊取。建議還是用紙質(zhì)的日記代替電腦日記，避免信息傳播范圍太大，管理好自己的日記本。研發(fā)一種新的硬件連接器，總是以隨機碼來保護自己真實IP地址，提高網(wǎng)絡安全的可靠性，加強對聯(lián)網(wǎng)信息的管理和保護。
三、結(jié)論
不論我們情不情愿，大數(shù)據(jù)時代都會到來，現(xiàn)實社會是我們高喊著走向大數(shù)據(jù)時代，其實大數(shù)據(jù)時代已經(jīng)向我們走來，所以與其被動接受，不如主動學習，從中找到自己的出路，成為大數(shù)據(jù)時代的建設者和受益者。
大數(shù)據(jù)學習心得篇3
奧倫·艾奇奧倫(Oren Etzioni)創(chuàng)立的從文本中挖掘信息的公司ClearForest，已經(jīng)被路透社收購。
美國股市每天成交量高達70億股，而其中三分二的交易都是由建產(chǎn)在數(shù)學模型和算法之上的計算機程序自動完成的。
farecast經(jīng)過了2003年立項，到2008年被收購。經(jīng)歷了5年的時間，數(shù)據(jù)從最早了12000條到2000億條。
大數(shù)據(jù)的平臺有：谷歌的MAPREDUCE 和開源HADOOP平臺(最初源于雅虎)。NOSQL更優(yōu)先于MYSQL.
大數(shù)據(jù)所用的數(shù)據(jù)記錄單位：拍字節(jié)PB(2的50次方)和艾字節(jié)EB(2的60次方)，澤字節(jié)ZB (2的70次方)，太字節(jié)TB。1EB=10億GB。1ZB=1024EB
20xx年，所有數(shù)據(jù)中只有7%是存儲在報紙、書籍、圖片等媒價上的模擬數(shù)據(jù)，其余全部是數(shù)字數(shù)據(jù)。
20xx年世界上存儲的數(shù)據(jù)預計能達到約1.2澤字節(jié)，其中非數(shù)字數(shù)據(jù)只占不到2%。
人類存儲信息量的增長速度比世界經(jīng)濟的增長速度快4倍。而計算機數(shù)據(jù)處理能力的增長速度則比世界經(jīng)濟的增長速度快9倍。
大數(shù)據(jù)告訴我們“是什么”而不是“為什么”。在大數(shù)據(jù)時代，我們不必知道現(xiàn)象背后的原因。
大數(shù)據(jù)的算法從因果關系向相關關紗轉(zhuǎn)化。這也是思維方式的轉(zhuǎn)變。
推薦電影《點球成金》MONEYBALL
大數(shù)據(jù)的三個思維方式：
1、不要依靠分析少量的數(shù)據(jù)樣本，不要抽樣調(diào)查。要分析與某事物相關的所有數(shù)據(jù)。
2、不要追求精確性，要樂于接受紛繁復雜的數(shù)據(jù)。
3、不要探求難以捉摸的因果關系，轉(zhuǎn)而關注事物的相關關系。
大數(shù)據(jù)中的“大”不是絕對意義上的大，雖然在大多數(shù)情況下是這個意思。大數(shù)據(jù)是指不用隨機分析法這樣的捷徑，而采用所有數(shù)據(jù)的方法。
LYTOR相機(光場相機)就是對拍照場景的應用。將傳統(tǒng)相機的拍攝照片的樣本進行全收集，成為樣本=總體的應用代表。
意外的案例：
如果把一個在社區(qū)內(nèi)有很多連接關系的人從社區(qū)關系網(wǎng)中剔除掉，這個關系網(wǎng)會變得沒那么高效，但卻不會解體。但是如果把一個與所在社區(qū)之外的很多人有著連接關系的人從這個關系網(wǎng)中剔除，整個關系網(wǎng)奶快就會破碎成很多的小塊。節(jié)點的做用。
社交網(wǎng)絡的多樣性是有額外價值的。這是一個人在社會關系網(wǎng)中的存在價值。
互聯(lián)網(wǎng)可以使數(shù)據(jù)達到精確嗎?只有5%的數(shù)據(jù)是結(jié)構化且能適用于傳統(tǒng)數(shù)據(jù)庫的。如果不接受混亂，剩下的95%的非結(jié)構化數(shù)據(jù)都無法被利用。只有接受不精確性，我們才能打開一扇從未涉足的世界的窗戶。
數(shù)據(jù)與算法那個更重要呢?簡單的算法+大數(shù)據(jù)，還是復雜的算法+小數(shù)據(jù)。結(jié)論就是大數(shù)據(jù)比算法智能系統(tǒng)更重要。
大數(shù)據(jù)學習心得相關文章：