刷新网页试试

用textFile加载本地文件时你试试这样写

sc.textFile("/home/hadoop/2.txt")

路径前面就别加 " file:// " 试试,我写的时候就没加，可以读取到本地文件

java或者scala 语言掌握 mysql hive 二者的命令熟悉 Navicat sqoop 等工具使用  flume hadoop sqark等架构

相比与MapReduce编程模型，Spark提供了更加灵活的DAG（Directed Acyclic Graph） 编程模型， 不仅包含传统的map、reduce接口， 还增加了filter、flatMap、union等操作接口，使得编写Spark程序更加灵活方便。

Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。