spark master无法正常启动，worker正常启动

DayOneMore

于 2021-02-17 10:54:12 发布

阅读量1.7k

点赞数

CC 4.0 BY-SA版权

分类专栏：分布式文章标签： spark

本文链接：https://blog.csdn.net/DayOneMore/article/details/113831883

当将dl23设为Spark Master时，出现只能启动Worker而不能启动Master的问题。初步误认为是JAVA_HOME配置错误，但实际是因为dl23的spark-env.sh配置文件是从dl8复制的，导致问题。解决办法是更新并正确配置Spark-env.sh文件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

背景

试用jps查看是否正常启动

问题描述：

dl8作为master时，可以正常启动master和worker，而dl23作为master时，无法启动master，但可以正常启动worker

starting org.apache.spark.deploy.master.Master, logging to /home/x x x/spark/spark-2.4.7-bin-hadoop2.6/logs/spark-xxx-org.apache.spark.deploy.master.Master-1-sss23.out
failed to launch: nice -n 0 /home/username/spark/spark-2.4.7-bin-hadoop2.6/bin/spark-class org.apache.spark.deploy.master.Master --host sss8 --port 7077 --webui-port 8080
  	at io.netty.channel.DefaultChannelPipeline.bind(DefaultChannelPipeline.java:973)
  	at io.netty.channel.AbstractChannel.bind(AbstractChannel.java:248)
  	at io.netty.bootstrap.AbstractBootstrap$2.run(AbstractBootstrap.java:356)
  	at io.netty.util.concurrent.AbstractEventExecutor.safeExecute(AbstractEventExecutor.java:164)
  	at io.netty.util.concurrent.SingleThreadEventExecutor.runAllTasks(SingleThreadEventExecutor.jav

最低0.47元/天解锁文章