运行wordcount程序时一直处于job running状态

来源:5-4 WordCount代码开发

sayss

2020-02-08 16:44

http://img1.mukewang.com/5e3e74990001206916950457.jpg

wordcount运行时日志信息如上图所示,请问这是什么原因导致的?

写回答 关注

2回答

  • 徐老师
    2020-02-11 16:55:35

    hadoop的mapred-site.xml yarn-site.xml core-cite.xml 等配置文件中的配置较多,此课程中暂时没有针对里面的参数做详细解释,如果对这块感兴趣的话可以先到网上查找一下公开资料,后面会有针对hadoop的高级课程会分析里面的参数?

  • sayss
    2020-02-11 13:01:08

    自问自答了,应该是yarn的配置文件没根据机器内存情况配好资源导致的,由于配置信息目前暂时看不懂,选择先在mapred-site.xml里暂时删除yarn框架指定,之后可以正常运行了

    慕瓜9571...

    删除后yarn集群里看不到hadoop任务的运行情况,怎么解决?

    2024-02-19 10:35:56

    共 1 条回复 >

快速入门Hadoop3.0大数据处理

快速入门Hadoop3.0数据处理,轻松迈入大数据领域

16784 学习 · 74 问题

查看课程

相似问题