猿问

spark countbykey的结果怎么输出

spark countbykey的结果怎么输出


慕哥9229398
浏览 1651回答 1
1回答

叮当猫咪

numSplits:来自job.getNumMapTasks(),即在job启动时用org.apache.Hadoop.mapred.JobConf.setNumMapTasks(int n)设置的值,给M-R框架的Map数量的提示。goalSize:是输入总大小与提示Map task数量的比值,即期望每个Mapper处理多少的数据
随时随地看视频慕课网APP
我要回答