在用Scala编写spark程序使用到了sc.textFile(“file:///home/hadoop/2.txt”) 竟然报没有找到文件,

来源:1-1 Spark简介

慕粉3236017

2017-08-29 22:44

最后我用spark-shell还是报这样错误,开始我以为是我的路径写错了,我就用cat命令 cat一下路径试一试,结果是游结果输出,说明路径没有写错,最后我把文件放在HDFS上竟然可以读取到文件,求大神们解释一下究竟是怎么回事?

写回答 关注

1回答

  • mickeychen
    2017-09-01 23:50:53

    用textFile加载本地文件时你试试这样写

    sc.textFile("/home/hadoop/2.txt")

    路径前面就别加 " file:// " 试试,我写的时候就没加,可以读取到本地文件

Spark从零开始

本课程旨在让同学们了解Spark基础知识,掌握Spark基础开发.

52741 学习 · 81 问题

查看课程

相似问题