3台linux搭建Pulsar集群环境用于测试
admin
2023-01-23 18:42:37
0
  搭建 Pulsar 集群需要 3 个组件:ZooKeeper 集群、BookKeeper 集群和 broker 集群
        以下部署策略:
        192.168.1.46  (部署BookKeeper,部署broker)
        192.168.1.47  (部署BookKeeper,部署broker)
        192.168.1.48  (部署单个ZK,部署BookKeeper,部署broker)
        前期准备
        1)jdk1.8
        2)在各机器根下创建 data目录,下载apache-pulsar-2.4.2-bin.tar.gz拷到data目录下
           chmod 777 apache-pulsar-2.4.2-bin.tar.gz
           tar xvfz apache-pulsar-2.4.2-bin.tar.gz
        一 ZooKeeper 集群
        为了简单一台机器上部署单个ZK使用.
        1) 在data目录下创建 zookeeper和zookeeper/logs目录
        2) 修改 zookeeper.conf 文件
              dataDir=/data/zookeeper
              dataLogDir=/data/zookeeper/logs
              server.3=192.168.1.48:2888:3888
        3)  执行命令 echo 3 > /data/zookeeper/zookeeper/myid
        4)  启动zk
             /data/apache-pulsar-2.4.2$ PULSAR_EXTRA_OPTS="-Dstats_server_port=8001" bin/pulsar-daemon start zookeeper
                 (注意:因为ZK和broker部署在同一机器启动时要加上PULSAR_EXTRA_OPTS="-Dstats_server_port=8001" 改变端口,否则到后边在冲突)
        5) 初始化集群元数据
            bin/pulsar initialize-cluster-metadata \
      --cluster pulsar-cluster-zk \
      --zookeeper 192.168.1.48:2181 \
      --configuration-store 192.168.1.48:2181 \
      --web-service-url http://192.168.1.48:8080 \
      --web-service-url-tls https://192.168.1.48:8443 \
      --broker-service-url pulsar://192.168.1.48:6650 \
      --broker-service-url-tls pulsar+ssl://192.168.1.48:6651

     二  BookKeeper 集群
          1)创建 /data/bookkeeper/目录
          2)bookkeeper.conf 文件
             advertisedAddress=HOSTNAMEIP  (根据机器IP填写)
            zkServers=192.168.1.48:2181
            journalDirectory=/data/bookkeeper/journal
            ledgerDirectories=/data/bookkeeper/ledgers
            3 执行初始化元数据命令;若出现提示,输入 Y,继续(只需在一个bookie节点执行一次)
                /data/apache-pulsar-2.4.2$ bin/bookkeeper shell metaformat
            4)启动  data/apache-pulsar-2.4.2$ bin/pulsar-daemon start bookie
            5)另两台机器根据以上操作分别启动
        三部署 broker集群
            1 修改配置文件broker.conf 
                zookeeperServers=192.168.1.48:2181
                configurationStoreServers=192.168.1.48:2181
                advertisedAddress=HOSTNAME (根据机器IP填写)
                clusterName=pulsar-cluster-zk
            2 启动data/apache-pulsar-2.4.2$ bin/pulsar-daemon start broker
            3 另两台机器根据以上操作分别启动

上一篇:Pulsar Token身份验证

下一篇:hive 安装

相关内容

热门资讯

德国总理:美国正在被伊朗羞辱 德国之声4月27日报道,德国总理默茨在访问一所学校时表示,在当前的持续冲突中,伊朗领导层正试图羞辱美...
理响中国|“长”歌以行,风云激... 光阴如梭,东方潮阔。这里是中国的长三角,世界的长三角。无论过去、现在还是未来,这片土地都因时代而生,...
白宫:特朗普及其国安团队开会讨... 新华社华盛顿4月27日电 美国白宫新闻秘书莱维特27日在记者会上证实,总统特朗普及其国家安全团队当天...
人民日报刊文:日本放开杀伤性武... 日本放开杀伤性武器出口推高地缘冲突风险(国际论坛)常思纯《人民日报》(2026年04月28日 第 0...
医疗保障法草案二审:明确生育保... 满足多样化健康保障需求本报记者 彭 波4月27日,医疗保障法草案二审稿提请十四届全国人大常委会第二十...
天津一景区发生自转旋翼机事故1... 澎湃新闻记者 吕新文中国民用航空华北地区管理局4月22日公布《豪客通航“10•1”天津长芦汉盐旅游区...
卡塔尔埃米尔与美国总统特朗普通... 当地时间24日,卡塔尔埃米尔塔米姆与美国总统特朗普通电话,重点就中东地区局势以及伊朗与美国谈判问题交...
男子30年前被扣押2859克黄... 澎湃新闻记者 王鑫家住辽宁省大连市的潘永嘉近日向澎湃新闻反映称,三十年前,他在大连周水子机场被盖州市...
商务部:取消反制欧盟两家金融机... 中华人民共和国商务部令二〇二六年 第1号鉴于欧盟已取消对中国两家金融机构的制裁措施,现公布《关于取消...
过去24小时共有5艘船只通过霍... 总台记者当地时间24日获悉,过去24小时内,共有5艘船只通过霍尔木兹海峡,其中包括一艘伊朗油轮。(总...