大數據修煉之路

大數據修煉之路

       大數據Spark是用Scala語言編寫架構，因此，認真學習Scala是首選。Scala 是一種面向對象編程和函數式編程的多范式編程語言，和java有些不同又比java強大。下載了《Programming in Scala》，慢慢啃，雖然原汁原味，但是畢竟英文理解能力有限，有些非常專業的特性講解還是一知半解，領悟不到要點，要參考中文版，這樣啃一段又返回去看對應中文版加深理解，但是進度非常慢，甚是苦惱，有幸在51CTO上看到了王家林全免費的《Scala深入淺出實戰初級入門經典視頻》，

喜出外望，像久旱逢春雨，如獲至寶，不禁恨自己后知后覺。雖然每天工作十分的繁忙，但還是會抽時間學習，只要工作一閑下來就在手機上觀看學習王老師的視頻，

發現王老師講的都是結合源碼案例，通俗易懂，實用明了，如沐春風，豁然開朗，比看書效果好了N倍，有些難點也很快逐個消化理解，自己一天一個腳印，學了初級后靜下來思考總結了一天，然后繼續中級課程的學習。從這些學習中能夠看出新一代的高級語言提供了前所未有的抽象高度，同時還提供給我們開發者更人性的關懷。Functional Programming和OOP的結合、超級強大的Pattern Matching、類型參數、類型協變(+T與-T)、函數Curing、范型、更強大的閉包等。例如無比靈活的pattern match，核心其實是Companion Object（盡管不限于此），隱式的apply(構建) 與 unapply(解構) 方法，同時match可以返回各種類型值，使得 matching 的語法特別簡潔，高效。王老師如一個睿智的使者，帶領我穿越一個個大數據不眠之夜，欣賞大數據過度的各種奇光異彩，使我受益匪淺，收獲越來越多，感覺自己如饑似渴，真是恨時不我待，對深入洞悉大數據Spark充滿了更多殷切期待與無比渴望。

     大數據正當其道，是未來發展的重點方向，大數據戰略也已在十八屆五中全會上列為重點戰略方向，中國在大數據方面才剛剛起步，但是各種新生力量異軍突起，勢如破竹，產生的價值與日俱增。當前，大數據與我們息息相關， 在大數據的應用領域，通過用戶行為大數據分析用戶個性數據，準確認知客戶特性，能有效幫助企業提升相關業務(如精準營銷/用戶細分與市場推廣)的經營價值，例如微信的定向推廣，還有瀏覽器的推廣的各種商品都是你最近一段時間瀏覽過的相近相關商品等，HiHunting大數據用戶畫像產品 幫助企業快速應用大數據洞察客戶。。在國外已經產生了數千億的市場價值，例如沃爾瑪的搜索。這家零售業寡頭為其網站Walmart.com自行設計了最新的搜索引擎Polaris，利用語義數據進行文本分析、機器學習和同義詞挖掘等。根據沃爾瑪的說法，語義搜索技術的運用使得在線購物的完成率提升了10%到15%。“對沃爾瑪來說，這就意味著數十億美元的金額。美國通用公司在飛機發動機的每一個零部件上都安裝了傳感器，這些傳感器在飛機發動機運作的同時不斷的把發動機狀態的數據傳到通用公司的云平臺上，根據大數據的分析可以隨時掌握每一家航空公司發動機的飛行狀況，可以告知這些航空公司發動機的哪些部件需要檢修或保養，避免飛機事故，通過這種服務通用公司就產生了幾百億美元的產值。Tesco PLC（特易購）連鎖超市在其數據倉庫中收集了700萬部冰箱的數據。通過對這些數據的分析，進行更全面的監控并進行主動的維修以降低整體能耗，每年節省相當可觀的費用。PredPol公司通過與洛杉磯和圣克魯斯的警方以及一群研究人員合作，基于地震預測算法的變體和犯罪數據來預測犯罪發生的幾率，可以精確到500平方英尺的范圍內。在洛杉磯運用該算法的地區，盜竊罪和暴力犯罪分布下降了33%和21%，挽救的社會財產價值不可估量，而且意義深遠。

現在正是學習大數據的最好機遇，要想真正***到大數據的世界，王家林老師不僅是大數據布道師，宛如一位東方巨匠，肩負起他的3000門徒，笑傲大數據過度，欲與天公試比高。因此他的視頻和書籍不容錯過，只要你一步一個腳印持之以恒，不斷思考和奮進，很快就可以成為大數據高手，實現年薪50萬的夢想。

王家林的第一個中國夢：免費為全社會培養100萬名優秀的大數據從業人員！

您可以通過王家林老師的微信號18610086859發紅包捐助大數據、互聯網+、O2O、工業4.0、微營銷、移動互聯網等系列免費實戰課程，

目前已經發布的王家林免費視頻全集如下：

1，《大數據不眠夜：Spark內核天機解密（共100講）》：http://pan.baidu.com/s/1eQsHZAq 

2，《Hadoop深入淺出實戰經典》http://pan.baidu.com/s/1mgpfRPu

3，《Spark純實戰公益大講壇》http://pan.baidu.com/s/1jGpNGwu

4，《Scala深入淺出實戰經典》http://pan.baidu.com/s/1sjDWG25

5，《Docker公益大講壇》http://pan.baidu.com/s/1kTpL8UF

6，《Spark亞太研究院Spark公益大講堂》http://pan.baidu.com/s/1i30Ewsd

7，DT大數據夢工廠Spark、Scala、Hadoop的所有視頻、PPT和代碼在百度云網盤的鏈接：
http://pan.baidu.com/share/home?uk=4013289088#category/type=0&qq-pf-to=pcqq.group

王家林免費在51CTO發布的1000集合大數據spark、hadoop、scala、docker視頻：

1，《Scala深入淺出實戰初級入門經典視頻課程》http://edu.51cto.com/lesson/id-66538.html

2，《Scala深入淺出實戰中級進階經典視頻課程》http://edu.51cto.com/lesson/id-67139.html

3，《Akka深入淺出實戰經典視頻課程》http://edu.51cto.com/lesson/id-77672.html

4，《Spark亞太研究院決勝大數據時代公益大講堂》http://edu.51cto.com/lesson/id-30815.html

5，《云計算Docker虛擬化公益大講壇 》http://edu.51cto.com/lesson/id-61776.html

6，《Spark 大講堂（純實戰手動操作）》http://edu.51cto.com/lesson/id-78653.html

7，《Hadoop深入淺出實戰經典視頻課程-集群、HDFS、Yarn、MapReduce》http://edu.51cto.com/lesson/id-77141.html

8，《從技術角度思考Hadoop到底是什么》http://edu.51cto.com/course/course_id-1151.html

“DT大數據夢工廠”團隊第一個中國夢：免費為社會培養100萬名優秀的大數據從業人員。

每天早上4點起持續分享大數據、互聯網+、O2O、工業4.0、微營銷、移動互聯網等領域的

精華內容，幫助您和公司在DT時代打造智慧大腦，將生產力提高百倍以上！

DT大數據夢工廠微信公眾號：DT_Spark，二維碼如下，期待大家加入！

大數據英雄召集令，我來了，你在哪？