spark性能调优

1. 分配更多的资源

   ／usr/local/spark/bin/spark-submit 
   --class cn.spark.workcount 
   -num-executor 3   //配置executoe的数量
   -driver-memory 100m  //配置driver的内存
   -executor-memory 100m  //配置每个executor的内存大小
   -executor-cores 3  // 配置每个executor的cpu core数量
   /usr/local/sparkWork.jar //