首页课程实战体系课手记专栏慕课教程

如何解决spark内存溢出问题

如何解决spark内存溢出问题

Qyouu

浏览 1309回答 1

1回答

当年话下

1 加内存，简单粗暴2 将rdd的数据写入磁盘不要保存在内存之中3 如果是collect操作导致的内存溢出，可以增大 Driver的 memory 参数

0 0

随时随地看视频慕课网APP

相关分类

Spark: 科普Spark，Spark是什么，如何使用Spark 1 回答; Spark之我看什么是RDD 1 回答