大数据应用工程师：大数据应用工程师学什么

大数据应用工程师，在大数据行业当中，也算是非常普遍存在的一个职位了，而随着大数据行业的进一步发展，越来越多的公司企业会需要更多的大数据应用工程师，这是毋庸置疑的。那么作为一个大数据应用工程师，需要学些什么呢，下面我们来详细了解一下。

大数据工程师，在大数据行业的发展当中是不可或缺的，不管处在数据处理的哪个环节，都需要足够的技术能力支撑，这是在这个行业这个职位上获得发展的根本基础。大数据应用工程师，是企业急需的人才，也是需要掌握足够技术实力的职位。


现在在国内，大大小小的互联网公司，都在涉足大数据业务，因而对大数据应用工程师的需求也在进一步加大。一个创业公司，哪怕只有十多人的开发团队，也可能会独立成立一个数据小组出来，他们不光要做大数据离线处理，还要做离线处理，不止有数据分析报表，还得进行深度的数据挖掘，做到精准的个性化推荐，先进的数据预测。

这一方面说明大数据的价值得到更大的认可，另一方面也说明大数据应用工程师需要掌握的技术实力要非常高。对于大数据处理，从数据收集、数据传输、数据离线实时处理，不止要维护hadoop集群、spark集群、storm集群的稳定性，抽空还要做深层数据挖掘，还要研究工业化流弊的算法。

那么大数据应用工程师需要学些什么呢？

首先，先具备一定的Linux和Java的基础，不一定要特别深，先能玩起来，Linux的话能自己执行各种操作，Java能写点小程序。这些事为搭建Hadoop环境做准备。

其次，学习Hadoop，学会搭建单机版的Hadoop，然后是分布式的Hadoop，写一些MR的程序。学学Hadoop生态系统的其它大数据组件，比如Spark、Hive、Hbase，尝试去搭建然后跑一些官网的Demo。

然后，进入大数据技术知识体系的搭建，数据仓库体系、用户画像和特征工程、调度系统、元数据系统、推荐系统、分布式理论、数据挖掘算法、各种系统的源码学习等等。

关于大数据应用工程师，以上提到的仅仅是非常粗略的一些概念，想要切切实实地掌握大数据技术，最好还是进行专业系统的培训学习。成都加米谷大数据学院，大数据开发12月班即将开班，名额有限，欲报从速！