在移动互联高速发展的今天,企业需要处理的数据量惊人的庞大,有这样一句话,人类文明伊始至今,所有的藏书数据量加在一起是1TB左右,而在中国,某一些超大型企业每天所产生的数据量就会超过20TB,而累积至今,企业所要处理的历史数据量则高达几十到几百PB,PB是TB的下一级单位,1024T为一个PB,如此巨大的数据量用传统的数据分析软件或者是简单的数据分析程序不能够进行很有效的数据分析,大数据程序开发因此诞生。
如今重视数据的机构已经越来越多,上到国防部,下到互联网创业公司、金融机构需要通过大数据项目来做创新驱动,需要数据分析或处理岗位也很多;常见的食品制造、零售电商、医疗制造、交通检测等也需要数据分析与处理,如优化库存,降低成本,预测需求等。
对于想要学习大数据的小伙伴,就目前来看。就业情况是非常好的,近期千锋大数据培训班毕业的学生,平均薪资都在15K左右,而且人手至少能拿到两个公司的OFFER。
综合各大企业的人才需求,千锋老师做了一个小调查,主要是对以下三大类专业技术人才需求颇丰。分别是:大数据系统研发类、大数据应用开发类、大数据分析类,其中的热门岗位有:
1、大数据系统架构师
大数据平台搭建、系统设计、基础设施。
技能:计算机体系结构、网络架构、编程范式、文件系统、分布并行处理等。
2、大数据系统分析师
面向实际行业领域,利用大数据技术进行数据安全生命周期管理、分析和应用。
技能:人工智能、机器学习、数理统计、矩阵计算、优化方法。
3、hadoop开发工程师。
解决大数据存储问题。
4、数据分析师
不同行业中,专门从事行业数据搜集、整理、分析,并依据数据做出行业研究、评估和预测的专业人员。在工作中通过运用工具,提取、分析、呈现数据,实现数据的商业意义。
技能:需要熟练SPSS、STATISTIC、Eviews、SAS等数据分析软件中的一门,至少能用Acess等进行数据库开发,至少掌握一门数学软件如matalab、mathmatics进行新模型的构建,至少掌握一门编程语言。
5、数据挖掘工程师
做数据挖掘要从海量数据中发现规律,这就需要一定的数学知识,基本的比如线性代数、高等代数、凸优化、概率论等。经常会用到的语言包括Python、Java、C或者C++,我自己用Python或者Java比较多。有时用MapReduce写程序,再用Hadoop或者Hyp来处理数据,如果用Python的话会和Spark相结合。
总之:目前大数据就业前景是非常好的,对于我们来说,更重要的是要学到真正的大数据技术,在高技术面前,工作机会将蜂拥而至!