Spark 启动脚本——sbin/slaves.sh-白红宇

Spark 启动脚本——sbin/slaves.sh

阅读量：5873 次

发布时间：2019-06-19

本文共 473 字，大约阅读时间需要 1 分钟。

Spark 启动脚本——sbin/slaves.sh 博客分类： spark

1. 如果参数小于1，返回。格式：slaves.sh [--config <conf-dir>] command...

2. 执行sbin/spark-config.sh，加载基本环境变量

3. 设置HOSTLIST为变量$SPARK_SLAVES的值

4. 如果存在，获取--config参数，即配置文件目录，目录不存在则返回

5. 执行conf/spark-env.sh

6. 如果HOSTLIST为空，则设置为conf/slaves

7. 设置ssh参数为“-o StrictHostKeyChecking=no ”

8. 加载$HOSTLIST文件中的列表地址，使用ssh登录并执行脚本参数传入的命令command

9. sleep或者直接wait保证命令执行结束

http://www.cnblogs.com/hujunfei/p/3624459.html

转载于:https://my.oschina.net/xiaominmin/blog/1597224

你可能感兴趣的文章

android 电池（一）：锂电池基本原理篇【转】

怎么使用阿里云直播服务应用到现在主流直播平台中

查看>>

Xcode全局替换内容，一键Replace

查看>>

1000 加密算法

查看>>

exif_imagetype() 函数在linux下的php中不存在

maven的tomcat插件如何进行debug调试

spring xml properties split with comma for list

查看>>

判断点是否在三角形内

查看>>

Android实战简易教程-第二十三枪（基于Baas的用户注冊验证username是否反复功能！）...

查看>>

在odl中怎样实现rpc

查看>>

leetcode 110 Balanced Binary Tree

查看>>