本文旨在为普通程序员(Java程序员最佳)提供一个入门级别的大数据技术学习路径,也是为大数据工程师提供一个进阶的学习机会,不适用于零编程基础的同学。
本人目前是一名大数据工程师,项目数据50T,日均数据增长20G左右,个人以前是从事Java后端开发,经过3个月的学习成功转型大数据工程师。
大数据本质也是数据,但是又有了新的特征,包括数据来源广、数据格式多样化(结构化数据、非结构化数据、Excel文件、文本文件等)、数据量大(最少也是TB级别的、甚至可能是PB级别)、数据增长速度快等
然后大数据方向的工作目前主要分为三个主要方向:
大数据工程师
数据分析师
大数据科学家
其他(数据挖掘等)
想做一个数据工程师必须要会这八大项目
以上都只是粗略的分析,真正要成为一名优秀的大数据工程师,程序员还需要更多的学习与努力。总而言之,前景是光明的,未来是美好的,在美国,大数据工程师平均年薪达17.5万美元,在中国顶尖的互联网公司里,大数据工程师的薪酬比同级别的其他职位高出30%以上。
作者:大数据首席数据师
链接:https://www.jianshu.com/p/4933233d5688