中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

2018即將推出的Apache Spark 2.4都有哪些新功能

發布時間:2020-10-05 16:31:10 來源:腳本之家 閱讀:235 作者:青色的海牛 欄目:服務器

本文來自于2018年09月19日在 Adobe Systems Inc 舉行的Apache Spark Meetup。

即將發布的 Apache Spark 2.4 版本是 2.x 系列的第五個版本。 本文對Apache Spark 2.4 的主要功能和增強功能進行了概述。

  • 新的調度模型(Barrier Scheduling),使用戶能夠將分布式深度學習訓練恰當地嵌入到 Spark 的 stage 中,以簡化分布式訓練工作流程。
  • 添加了35個高階函數,用于在 Spark SQL 中操作數組/map。
  • 新增一個新的基于 Databricks 的 spark-avro 模塊的原生 AVRO 數據源。
  • PySpark 還為教學和可調試性的所有操作引入了熱切的評估模式(eager evaluation mode)。
  • Spark on K8S 支持 PySpark 和 R ,支持客戶端模式(client-mode)。
  • Structured Streaming 的各種增強功能。 例如,連續處理(continuous processing)中的有狀態操作符。
  • 內置數據源的各種性能改進。 例如,Parquet 嵌套模式修剪(schema pruning)。
  • 支持 Scala 2.12。

點擊 示說網 ,即可下載此PPT。

2018即將推出的Apache Spark 2.4都有哪些新功能

2018即將推出的Apache Spark 2.4都有哪些新功能

2018即將推出的Apache Spark 2.4都有哪些新功能

2018即將推出的Apache Spark 2.4都有哪些新功能

2018即將推出的Apache Spark 2.4都有哪些新功能

總結

以上所述是小編給大家介紹的2018即將推出的Apache Spark 2.4都有哪些新功能,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對億速云網站的支持!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

福清市| 教育| 芷江| 长沙县| 来安县| 石河子市| 潼南县| 涟水县| 翁牛特旗| 伽师县| 珲春市| 海晏县| 霍邱县| 乡城县| 中西区| 镇江市| 江门市| 施秉县| 小金县| 泸水县| 平武县| 彭州市| 广水市| 汉寿县| 义乌市| 新河县| 桐梓县| 茶陵县| 图木舒克市| 台湾省| 修武县| 南和县| 北碚区| 沈阳市| 綦江县| 和顺县| 丰宁| 绥化市| 盐边县| 灵寿县| 武宁县|