#
[TOC] Spark算子概述 RDD：彈性分布式數據集，是一種特殊集合、支持多種來源、有容錯機制、可以被緩存、支持并行操作，一個RDD代表多個分區里的數據集。 RDD有兩種操作算子： T
大數據需要學習什么？很多人問過我這個問題。每一次回答完都覺得自己講得太片面了，總是沒有一個合適的契機去好好總結這些內容，直到開始寫這篇東西。大數據是近五年興起的行業，發展迅速，很多技術經過這些年的迭代
項目實戰案例：搜狗日志查詢分析 數據： 一、電商大數據平臺整體架構1、大數據（Hadoop、Spark、Hive）都是一種數據倉庫的實現方式核心問題：數據存儲、數據計算什么是數據倉庫？傳統的解決大數據
Linux 下運行spark local bind on port 0. Attempting port 1 問題2016-11-01&nb
一、case class 用case修飾的Class 我們稱之為Case Class。編譯器看到這個case修飾的class，會為這個class加一些額外
一爬蟲的定義：所謂爬蟲就是指：可以獲取網頁信息的程序又分為通用爬蟲和聚焦爬蟲1)通用爬蟲：從互聯網中搜集網頁，采集信息，這些網頁信息用于為搜索引擎建立索引從而提供支持，它決定著整個引擎系統的內容是否豐
大數據開發過程中常用的分析軟件大數據研究的出現，為企業、研究機構、政府決策提供了新的行之有效思路和手段，想要做好大數據的管理和分析，一些大數據開發工具的使用是必不可少的，以下是大數據開發過程中常用的工
[TOC] DStream的各種transformation Transformation Meaning map(func) 對DStream中的各個元素進行func函數操作，然后返回一個新
最近幾年，大數據火了起來,吸引著越來越多的人加入到學習大數據的隊伍之中,其中0基礎的小白也有不少，甚至有的連編程語言不太了解,所以說有些同學就對自己失去了信心，認為自己學習不了大數據，那么這肯定是錯誤
大數據培訓好就業嗎？ 大數據的本質是從一堆雜亂無章的數據中分析出有價值的信息，能夠為政府、企業、科研機構等決策提供依據。近年來，大數據行業發展勢頭迅猛，國家政府層面大力扶持，想轉行學習大數據的人員也很
