可以将 Spark 配置为监听多个网络接口/IP 地址吗?

可以将 Spark 配置为监听多个网络接口/IP 地址吗?

我的 Spark 集群中的节点每个都有两个网络接口,一个是公共的,一个是私有的。使用SPARK_MASTER_IP环境变量,我可以配置 Spark在一个或另一个 IP 地址上监听端口 7077。

例如:

netstat -tulpn
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name
tcp6       0      0 10.x.x.x:7077           :::*                    LISTEN      43403/java

有没有办法可以配置 Spark 同时在公共和私有接口上监听端口 7077?

相关内容