Kafka集群常见的跨网络访问详解
admin
2023-01-24 20:00:57
0

场景说明:
当客户端与服务端在不同区域(跨防火墙,地址均做了映射)时,客户端访问kafka时会出现获取不到broker的问题,但是网络之间是互通的。但在跨防火墙下,client请求zookeeper的时候,zookeeper返回给client的broker IP是kafka的实际地址,而不是映射地址,因此client会访问失败。
Kafka集群常见的跨网络访问详解

解决方式一、
1、配置文件:listeners=PLAINTEXT://主机名:9092
2、服务端hosts:内网地址 主机名
3、客户端hosts :外网地址 主机名

注意事项:不安全,且配置复杂不统一

解决方式2:(案例)
1、注释:
listeners=PLAINTEXT://192.168.111.134:9092

添加:

   inter.broker.protocol.version=1.0
   log.message.format.version=1.0
   advertised.listeners=INSIDE://192.168.111.134:9092,OUTSIDE://node7:9093
   listeners=INSIDE://192.168.111.134:9092,OUTSIDE://node7:9093
   listener.security.protocol.map=INSIDE:PLAINTEXT,OUTSIDE:PLAINTEXT
   inter.broker.listener.name=INSIDE

解释:相当于开通2个端口,如果服务器多网卡可以主机名部分填写外网地址。
如果采用统一管理,可采用主机名解析,用nginx代理。
上面的变更,需要3台重启集群重启生效,zk监听地址不一样了,如图(所以要考虑到业务,建议标准化配置)
Kafka集群常见的跨网络访问详解

2、服务端hosts
内网地址 主机名 (这里采用域名解析)

 注意:官网也提供了安全加密,非文本加密方式,如果kafka和zk都要求安全,建议参考官网统一配置

Kafka集群常见的跨网络访问详解

官网相关参数解释:

host.name:
Kafka集群常见的跨网络访问详解

advertised.host.name:
advertised.listeners:
listeners:

Kafka集群常见的跨网络访问详解
Kafka集群常见的跨网络访问详解

上一篇:浅谈AD域

下一篇:CentOS7搭建×××连接

相关内容

热门资讯

今日重磅消息“七千在线.有挂吗... 有 亲,根据资深记者爆料七千在线是可以开挂的,确实有挂(咨询软件无需打开...
终于了解“情怀古诗词.是不是有... 终于了解“情怀古诗词.是不是有挂?”其实是有挂您好,情怀古诗词这个游戏其实有挂的,确实是有挂的,需要...
玩家最新攻略“欢又聊红包.怎么... 家人们!今天小编来为大家解答欢又聊红包透视挂怎么安装这个问题咨询软件客服徽4282891的挂在哪里买...
终于懂了“微信十三水.怎么开挂... 终于懂了“微信十三水.怎么开挂?”必胜开挂神器您好,微信十三水这个游戏其实有挂的,确实是有挂的,需要...
玩家分享攻略“天下棋牌.开挂器... 网上科普关于“天下棋牌有没有挂”话题很是火热,小编也是针对天下棋牌作*弊开挂的方法以及开挂对应的知识...
【第一资讯】“一喜棋牌.怎么开... 家人们!今天小编来为大家解答一喜棋牌透视挂怎么安装这个问题咨询软件客服徽9752949的挂在哪里买很...
美国布朗大学撤回第二起枪击报告... 当地时间12月13日,美国布朗大学更新消息称,在第一起枪击事件发生地以东的州长街(Governor ...
今日重大消息“闽悦麻将.是不是... 今日重大消息“闽悦麻将.是不是有挂?”必胜开挂神器您好,闽悦麻将这个游戏其实有挂的,确实是有挂的,需...
【第一财经】“微乐龙江麻将.辅... 网上科普关于“微乐龙江麻将有没有挂”话题很是火热,小编也是针对微乐龙江麻将作*弊开挂的方法以及开挂对...
“豆包手机”被监管机构约谈?知... 豆包手机持续引发关注。 12月1日,字节跳动旗下AI大模型“豆包”宣布上线手机助手并与中兴通讯合作推...