10.7 开课,报名即将截止!欢迎联系咨询!

课程信息一览

课程时长

16

每周周六周日5-7pm PST

全程TA辅导

学费

限时优惠 SALE!

only

6000

培训目标

掌握工业界

Data Engineer

实际操作全技能

项目优势

重点知识要点讲解

实际工业项目练习

最强导师阵容求职辅导

课程安排

Slogan
第1周

  • Big Data Introduction
  • Course Project #1. App Cluster deployment with HDFS
  • MapReduce Introduction
第2周

  • MapReduce, MR design pattern
  • Course Project #2. MapReduce as ETL
第3周

  • Hive, HQL language, hive data processing
  • Course Project #3. Data Processing using Hive
第4周

  • Pig, Pig Latin Language, Pig works as ETL
  • Course Project #4. Data Ingestion using Pig
第5周

  • 实时处理系统, Storm, Kafka消息分发
  • HBase, HBase tables and query, storm works with HBase
  • Course Project #5. Yelp data processing with Storm
第6周

  • RDD structure
  • Transformation, action and DAG
  • Job, stage and task execution
  • Spark SQL
  • Spark Dataframe
  • Course Project #6. Yelp Project Conclusion
第7周

  • Spark Streaming
  • Real time data application
  • Streaming source and task
  • Reliability and fault recover
第8周

  • Spark Machine Learning. MLLib, 图形计算, GraphX
第9-16周

  • 项目实践

课程优势

1. 行业真实的项目实践

2. 紧跟行业前沿的课程设计

3. 强大的师资和关系网

4. 求职辅导与内推

1. 行业真实的项目实践

8周项目真实项目操练,

全程导师引领,

接触不同行业领域的大数据现实应用。

DAL与各类科技公司有广泛合作,

通过联合开发和技术咨询方式为学员提供实习机会。

每位学员可以选择我们提供的实习项目,

也可以结合自己的背景,

在导师指导下完成个人定制化的实习项目。

 

Project 项目纲要

– 随着课程的进行, 逐步了解和实践大数据行业最常用的Lambda构架

– 根据事件, 依据数据的时效分层次处理(参见下图)

– 实战Data Pipeline,  处理互联网Review平台中客户评价的数据

– 结合我们数据科学实际项目, 制作用户游戏推荐系统

– 实践和体验在Amazon云平台(AWS)中各项基础工具的使用方法( EC2, S3等)

– 从根基搭建基于Spark的大规模数据处理系统

– 进阶演练Lambda构架,制作金融业务应用

– 练习业务接口, API, 实现数据整合

– 基于Storm和Kafka, 练习实时数据流处理

– 基于Spark Streaming 和 Kafka,用不同的架构实现实时流处理

– 体会大数据系统在实际金融项目中的应用

项目特点

学员们将完成基于Lambda架构的End-to-End Project,

数据批处理(MapReduce, Hadoop, Hive, Pig, Oozie)

和实时处理(Storm, Kafka, Spark),

打造更完善的skills set。

 

实习项目全面采用Agile开发管理体系,

结合Trello实现版本控制,

带你提前了解企业项目管理。

 

36台Server的集群计算资源,

提供给学员7天24小时全天候集群开发环境,

让每个学员都有充分的上机练习机会。

 

成功完成项目的学员将得到合作企业的实习证明!

2. 紧跟行业前沿的课程设计

集结各大公司Big Data Engineer从Entry level到Management level的全部招聘要求

市面上最符合行业实际需求的全面培训求职课程

根据每个学生个性化打造最合适的职场突围计划

成功找到一份大数据工程师相关的高薪职位

 

理论与实践相结合:授课+实战结合+Case Study

  • 8周授课,每周六周日2小时实战课
  • 每周一个工业界应用Case Study;每周work load 10-15小时;
  • 同时熟悉业界最常用的大数据平台: Hortonworks (DAL实体服务器群), Cloudera (课上练习), Amazon Web Service (AWS, 项目实践)

3. 强大的师资和关系网

讲师来自北美顶尖科技企业,且具有3-8年大数据经验。

多年工作经验言传身教, 特别是

分布式系统调优,

 java语言在分布式系统中的应用,

和最新实时数据系统的开发。

更提供算法辅导,提升刷题能力

 

任劳任怨的TA团队,提供课下全程辅导

课下更有具有专业背景的TA全程辅导,

答疑解惑,手把手的带你入门。

学员可以通过Discussion Board随时提出问题,会有TA及时解答。

让你在遇到问题第一时间得到帮助,

解决孤立无援的自学窘境

 

顶级职业Network

超过500名老师、mentor、校友、学员组成强大的DAL关系网,

遍布北美超过80家不同的大小数据科技公司。

他们组成的强大后援团会为大家提供第一手的行业insights

Our Mentors are from …

4. 求职辅导与内推

与面试官直接对话,个人职业发展辅导

提供6周在线职业辅导课程(每周五7-8pm PDT)

 

简历修改+面试培训

面试技巧辅导

面试真题模拟面试

与硅谷猎头直接对接,提供数据行业大公司岗位内推

校友面经分享和定制化的内推

授课时间及形式

10月7日起  周六周日5-7pm PST

Online Webinar 互动式直播

第9周起, 周六 5-7pm PST

我们提供当天直播的视频录制

(仅提供给当天参与课程的学员,如有原因, 请提前通知TA)

报名及付款方式

适合报名对象:

EE或CS背景,或者已经有一定经验的Data Science的同学

**Data Engineer课程对计算机尤其是Java编程等要求比较高,CS背景强的同学更容易跟上课程。其余背景的同学如果感兴趣, 欢迎填写报名表, 我们会预约老师和您一对一交流讨论一下是否适合。

报名流程

1. 完成申请    2. 预约咨询    3. 付款成功    4. 听课学习

免费预约老师一对一课程咨询!

8.5 开课,报名即将截止!

一起走进新数据时代最高薪的职业,大数据工程师Big Data Engineer!

距离开班还有

相关阅读

数据科学家与数据分析师、数据工程师到底有何差别?

这篇文章将定义数据科学家职业角色的方方面面,包括技能,资质,教育背景,经验,职责等。很多人认为数据科学家和数据分析师、数据工程师没什么不同,实则不然。下图显示数据科学家须具备的知识,技能,思维。

如何建立数据科学和数据工程团队?

数据科学和数据工程团队该如何建立?比如,是否有与数据科学配对的“数据工程”团队这个概念?还是数据科学家和数据工程师都属于“纵向”产品团队?数据科学与工程团队如何互动?数据科学的工作如何与数据工程协调?数据科学家与工程师之间的责任分工如何?有没有混合角色的概念?

剖析Scala | 数据工程师评价Scala语言的现状和发展

今年上半年,我当时正在建立一个数据工程师的队伍,并且需要选择一门编程语言。Scala那个时候看起来是一个非常好的选择—我们一开始用Spark试验了—但我们遇到了一些障碍。我尝试调查了这个领域的一些想法,但没有一个是有建设性的。我读的文章里面的想法不是有偏颇的,就是过时的,或者两者都是。我现在写下这篇文章是希望帮助之后有人和我遇到一样的情况,需要弄清或者评估Scala对建设一个数据科学或者数据工程师的队伍的作用。

理论上说,什么是数据工程师,什么是数据科学家

这么多公司需要大数据人才,小伙伴们也纷纷跃跃欲试投身这场数据革命中。可到底大数据有哪些岗位需求呢?对用人的要求是怎样的呢?我们今天来仔细看一看。