nodemanager启动：Failed to initialize spark2_shuffle...java.net.BindException: Address already in use

分类: 文章 • 2024-11-29 17:47:46

提示端口被占用，但日志没找到具体端口，默认spark.shuffle.service.port是7337，日志有打印但发现未被占用

然后找了下yarn和spark配置文件相关的端口，还列出所有端口，一个个根据端口找到应用排查，折腾了半个多小时，最终还是采用重启大法搞定