三个账号都在 Huawei☁️的同一个区域都有一个服务器,但是无法切换 VPC 组建对等连接的网络。现在只有公网环境能够互相访问,我试了一下如果 Hadoop 的配置文件全部使用公网 IP ,这样搭建出来的 Hadoop 集群会有很多问题,要么 NameNode 不能启动,要么 DataNode 不能启动,要么访问 HDFS 出错…… bug 不断,网上也没有类似的教程,网上几乎都是虚拟机/内网环境搭建的,所以没有什么参考性。问 Ai 也是不断试错,都知道 v2 大佬多,所以我来问问😂
1
han777 Jan 11, 2025
试试用 wireguard 组建 VPN ?
hadoop 集群的进程会绑定很多端口号,如果云服务器的防火墙没放开这些端口的话,就会导致集群无法互联。https://www.cnblogs.com/yjt1993/p/10280609.html |
4
zizon Jan 12, 2025
结构上跟内网没区别.只要网络互通就行.
实践上会有延迟问题导致的诸如超时等情况引发状态异常. |
5
defunct9 Jan 12, 2025
应该可以。开 ssh ,让我上去试试
|
6
han777 Jan 12, 2025
@psyer wireguard 可以使你的多台机器组成一个虚拟的局域网。https://icloudnative.io/posts/wireguard-docs-theory/
|