本文来自于2018年09月19日在Adobe系统公司举行的Apache火花Meetup。
即将发布的Apache火花2.4版本是2。x系列的第五个版本。本文对Apache火花2.4的主要功能和增强功能进行了概述。
-
<李>新的调度模型(障碍调度),使用户能够将分布式深度学习训练恰当地嵌入到火花的阶段中,以简化分布式训练工作流程。
<李>添加了35个高阶函数,用于在火花SQL中操作数组/地图。
<李>新增一个新的基于砖的spark-avro模块的原生AVRO数据源。
<李> PySpark还为教学和可调试性的所有操作引入了热切的评估模式(即时抓取模式)。
<李>火花alt=" 2018即将推出的Apache火花2.4都有哪些新功能">
以上所述是小编给大家介绍的2018即将推出的Apache火花2.4都有哪些新功能,希望对大家有所帮助,如果大家有任何疑问请给我留的言,小编会及时回复大家的。在此也非常感谢大家对网站的支持!
