您好,登錄后才能下訂單哦!
在MapReduce中shuffle和Spark的shuffle的過程有一些區別。這里做一下具體的介紹。
Mapreduce的shuffle過程圖解
Spark shuffle過程圖解
注意:spark shuffle過程中沒有分區和排序的過程,而且存儲結果存儲在內存中,所以速度要比mapreduce要快很多。
先就到這里吧,圖解的說明應該比較清晰了。有問題歡迎留言
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。