如何开始学习大数据？作为开发人员我需要关注哪些模块

Question

我打算学习大数据。我刚刚完成了教程，但我有点困惑从开发人员的角度来看我需要关注哪些模块。目前我正在研究java。我希望您的回复对我下一步的大数据之旅有所帮助。

Answer 1

首先，我建议先熟悉一下“大数据”这个术语，它有点浮夸且有争议，它更像是一个营销口号，而不是一个技术规范，涵盖了广泛的技术。从那开始，我会尝试确定哪个方面（物联网、构建/运行数据中心、etl/数据集成/仓储、分析/统计/机器学习...）或者应用的哪个领域（零售、生物信息学...）您感兴趣，并且从就业角度来看这是合理的。我还会考虑您想要从事的技术堆栈（Scala、Python...）。逆向工程工作机会可能是实际获取该信息的一种方式。数据科学家的配置文件（etl + 机器学习 + 可视化）获得了广泛的接受并涵盖了某些技能组合，也可以找到大数据分析师和投标数据工程师，但可以说其配置文件定义不那么明确。如今，人们可以在数据科学领域获得完整的 MSC（这是对它的个人评价），但也许你也可以通过一条不那么奇特的路线踏入大门。培训的质量可能参差不齐，我发现 Andy Ngs 的机器学习和深度学习（大神经网络）MOOC 令人惊叹，来自 EPFL-Scala 方面的所有内容（如果你想走这条路）在技术上都非常出色，而且从演示来看好的（我尝试使用 Scala 和 Spark 进行大数据分析）。