中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

如何進行spark SQL編程動手實戰

發布時間:2021-12-16 22:03:39 來源:億速云 閱讀:113 作者:柒染 欄目:云計算

如何進行spark SQL編程動手實戰,相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。

首先創建SparkContext上下文:

如何進行spark SQL編程動手實戰

接著引入隱身轉換,用于把RDD轉成SchemaRDD:

如何進行spark SQL編程動手實戰

接下來要加載數據,這里的測試數據是user.txt文件:

我們創建好use.txt增加內容并上傳到hdfs中:

如何進行spark SQL編程動手實戰

hdfs命令查詢:

如何進行spark SQL編程動手實戰

驗證數據是否加載成功:

如何進行spark SQL編程動手實戰

此刻user還是一個MappedRDD:

如何進行spark SQL編程動手實戰

此刻的teenagers已經隱身轉換成SchemaRDD

如何進行spark SQL編程動手實戰

結果:

如何進行spark SQL編程動手實戰

同樣使用"user.txt"的數據:

如何進行spark SQL編程動手實戰

我們這次直接使用SQL查詢操作:

如何進行spark SQL編程動手實戰

可以發現使用DSL的使用teenagers在內部已經被隱身轉換了SchemaRDD的實例

可以發現與前面那張注冊Table方式的結果是一樣的

看完上述內容,你們掌握如何進行spark SQL編程動手實戰的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

安徽省| 洞头县| 化德县| 双鸭山市| 漳浦县| 布拖县| 丰原市| 通化市| 绥芬河市| 钦州市| 黄石市| 根河市| 石柱| 汝南县| 凤翔县| 融水| 马鞍山市| 增城市| 玉田县| 柳河县| 高要市| 万源市| 墨脱县| 嵩明县| 申扎县| 象州县| 揭西县| 治县。| 南汇区| 临西县| 阿合奇县| 苍梧县| 江都市| 原平市| 台东县| 北碚区| 黑山县| 通渭县| 明水县| 礼泉县| 五峰|