IT博客汇
  • 首页
  • 精华
  • 技术
  • 设计
  • 资讯
  • 扯淡
  • 权利声明
  • 登录 注册

    [原]增加spark worker的内存和datanode的内存方法

    wonder4发表于 2016-09-08 22:43:39
    love 0

    spark:

    $SPARK_HOME/conf/spark-env.sh

    修改SPARK_WORKER_MEMORY=4g


    hadoop

    $HADOOP_HOME/etc/hadoop/hadoop-env.sh

    修改增加

    export HADOOP_HEAPSIZE=8192




沪ICP备19023445号-2号
友情链接