软件工程师求职新方向|Spark大数据开发与构架
Spark是UC Berkeley AMP lab所开发类似于Hadoop MapReduce的通用并行计算框架,Spark是基于map reduce算法实现分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出的结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce算法。
主讲人介绍:
Speaker1: Alick 数据应用学院毕业学员
Speaker2: Jason Geng, 资深全栈数据科学家,数据科学协会(link)执行主席, 南加州大学(USC)客座讲师,曾在Symantec工作8年,担任大数据安全、数据科学教育专家
主要内容:
1. Spark简介
2. Spark为什么流行
3. 实际案例分析演示
4. 大数据行业前景以及应用
5. CS学员大数据方向SDE求职