更多代码请见：https://github.com/xubo245/SparkLearning Spark生态之Alluxio学习 版本：alluxio（tachyon） 0.7.1，spark-1.5.2,hadoop-2.6.0 1.问题描述 1.1 运行cs-bwamem是出现序列化shuffle overflow问题，主要是需要输出sam到本地，文件比较大，默认的是： sp

如何设置spark.kryoserializer.buffer.max value 在运行Spark计算任务时，出现了Buffer Overflow错误，Kryo序列化在序列化对象时缓存爆了。 反复设置了几次，终于发现了自己的错误，分享出来，希望大家能避坑。 设置Kryo为序列化类 //设置Kryo为序列化类（默认为Java序列类）sparkConf.set("spark.se