#Apache spark系列技术直播# 第六讲【 What's New in Apache Spark 2.4? 】 ...

转载于 2018-12-21 16:22:07 发布 · 81 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：https://yq.aliyun.com/articles/680949

文章标签：

#大数据

本次分享将概述Spark2.4版本及其后续版本的主要特性和增强功能，包括新的障碍执行模式、灵活的流式sink、原生AVRO数据源、PySpark的急切求值模式、Kubernetes支持、高阶函数等。由Databricks的李潇讲解，他是Apache Spark项目管理委员会成员。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Abstract(简介):

This talk will provide an overview of the major features and enhancements in Spark 2.4 release and the upcoming releases and will be followed by a Q&A session.
The Apache Spark 2.4 comes packed with a lot of new functionalities: new barrier execution mode, flexible streaming sink, the native AVRO data source, PySpark’s eager evaluation mode, Kubernetes support, higher-order functions, Scala 2.12 support and a lot of other improvements.

_2018_12_21_3_46_04

主讲人：李潇

李潇现就职于Databricks，专注于Apache Spark的开发和建设。他是Apache Spark项目管理委员会成员。本科毕业于南京理工大学，后在佛罗里达大学(University of Florida)获计算机博士学位，曾就职于IBM，获发明大师称号(Master Inventor)，在数据处理领域发表专利十余篇。(Github: gatorsmile)

ppt链接：https://yq.aliyun.com/download/3181
视频链接：https://yq.aliyun.com/live/775

加入钉钉群与大牛交流经验

_2018_12_05_4_48_20_meitu_1