2017年Apache Spark两大发展方向：深度学习和提升实时流性能
16lz
2021-04-02
2017年Apache Spark两大发展方向：深度学习和提升实时流性能
Matei Zaharia 过往记忆大数据
最近在美国旧金山举行的Spark Summit 2017，Apache Spark的发明者Matei Zaharia介绍了2017年Apache Spark的重点开发方向：深度学习以及对流性能的改进。2016年是深度学习之年，而且目前越来越多的人在加入这个，深度学习 + 大数据是目前一个很热门的趋势，所以spark中支持深度学习并且提供一个友好的API势在必行。
另外，Spark Streaming虽然在吞吐量方面占据了很多优势，但是随着流技术的发展，越来越多的应用不仅关注实时流的吞吐量，时延也是一个很重要的考量指标。所以2017年、Apache Spark 2.2.0之后流的时延将达到1ms！最重要的是，这种性能的提升根本不需要用户修改之前写的代码。好了，不多说了，大家看看Matei Zaharia的PPT。（本文PPT下载地址：http://pan.baidu.com/s/1kVDmaN1，点击下面 阅读原文 即可进入下载）
更多相关文章
- 后来，我去了拼多多，做了数据分析师。
- 杂 | PMP项目管理认证
- Java并发编程学习3-可见性和对象发布
- 网工小白笔记|第一章OSI参考模型学习笔记
- Go语言学习8-接口类型
- 如何学习linux
- Android 高通Camx架构学习 - 第1章
- 告别规范化！MIT谷歌等提出全新残差学习方法，效果惊艳
- Go语言学习5-切片类型