SDE in Big Data - Spark framework and developing

Spark是基于map reduce算法实现分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出的结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce算法。

Start

September 16, 2017 - 10:00 am

End

September 16, 2017 - 11:00 am

Address

Online Webinar   View map

Categories

中文公开课

软件工程师求职新方向|Spark大数据开发与构架

 

Spark是UC Berkeley AMP lab所开发类似于Hadoop MapReduce的通用并行计算框架,Spark是基于map reduce算法实现分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出的结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce算法。

主讲人介绍:

Speaker1: Alick 数据应用学院毕业学员
Speaker2: Jason Geng, 资深全栈数据科学家,数据科学协会(link)执行主席, 南加州大学(USC)客座讲师,曾在Symantec工作8年,担任大数据安全、数据科学教育专家
主要内容:

1. Spark简介

2. Spark为什么流行

3. 实际案例分析演示

4. 大数据行业前景以及应用

5. CS学员大数据方向SDE求职

MORE DETAIL

Phone

1-800-485-7918

Email

info@DataAppLab.com