大数据开发工程师一般会与业务进行对接，要么是基于某一个场景进行有针对性的数据处理，要么是打造一个大数据产品。在这里我们也需求纠正一个小小的概念，可能有些小伙伴认为有大数据岗位需求的公司一定是一个本身具备很多数据、有着很多用户沉淀的公司，其实不然。

除了分析公司本身业务数据以外，同样能够打造一款通用的大数据产品，大家能够参阅我的另一篇文章：如何用开源组件“攒”出一个大数据建模平台。所以大数据的岗位尽管不像普通的开发工程师那么多，可是需求仍然存在。

1、数据发掘：分类 (Classification)、估量(Estimation)、猜测(Prediction)、相关性分组或相关规则(Affinity grouping or association rules)、聚类(Clustering)、描绘和可视化、Description and Visualization)、杂乱数据类型发掘(Text, Web ,图形图像，视频，音频等)

2、模型猜测：猜测模型、机器学习、建模仿真。

3、结果呈现：云核算、标签云、联系图等。

想要成为一名合格的大数据开发工程师，首要就要了解大数据这样职业，大数据非传统型的互联网数据信息，大数据也包含了许多新的特征。

互联网时代的发展，每天都产生各种各样的数据信息，数据来历很广，每天都有从各方面降临的数据信息，大数据格式多种多样，非结构化数据、结构化数据、excel文件等等，而且大数据数量很大，至少要是TB级别的，甚至会到达PB级别的。

一、大数据阶段课程晋级，由两周变为一个月，掩盖大数据最中心的技能

大数据阶段课程由两周晋级到一个月，课程掩盖大数据最中心的技能，同时，扔掉过气技能，技能晋级最新干流Flink结构，项目从原先的网站流量剖析晋级为商品引荐体系。

二、大项目贯穿，京淘重构，紧跟商场干流技能变化趋势