kubernetes集群安装指南：etcd集群部署
admin
2023-04-03 01:21:47
0次

etcd 是基于 Raft 的分布式 key-value 存储系统，由 CoreOS 开发，常用于服务发现、共享配置以及并发控制（如 leader 选举、分布式锁等）。kubernetes 使用 etcd 存储所有运行数据。

部署准备

所有操作都是在devops机器上操作，将相关脚本编辑好，然后通过ansible 脚本模块统一执行。

定义环境变量
#################### Variable parameter setting ######################
ETCD_INSTALL_PATH="/data/apps/k8s/etcd"
ETCD_BIN_DIR="${ETCD_INSTALL_PATH}/bin"
ETCD_DATA_DIR="${ETCD_INSTALL_PATH}/data"
ETCD_WAL_DIR="${ETCD_INSTALL_PATH}/wal"
N01="master-k8s-n01=https://10.10.10.22:2380"
N02="master-k8s-n02=https://10.10.10.23:2380"
N03="master-k8s-n03=https://10.10.10.24:2380"
ETCD_ENPOIDTS="$N01,$N02,$N03"
CA_PATH="/etc/k8s/ssl"
SOFTWARE="/root/software"
VERSION=v3.3.13
PACKAGE="etcd-${VERSION}-linux-amd64.tar.gz"
HOSTNAME=`hostname`
DOWNLOAD_URL="https://github.com/devops-apps/download/raw/master/etcd/${PACKAG}"
ETH_INTERFACE=eth2
LISTEN_IP=$(ifconfig | grep -A 1 ${ETH_INTERFACE} |grep inet |awk '{print $2}')
USER=k8s
下载和分发 etcd 二进制文件

登录devops访问etcd 的 release 页面下载最新版本的发布包并通过ansible同步到三个master三个节点/root/software目录下：

wget $DOWNLOAD_URL -P $SOFTWARE

2 部署etcd集群

在devops主机上使用ansible分别对三个master节点执行以下操作：

2.1 安装etcd二进制执行命令
### 1.Check if the install directory exists.
if [ ! -d $ETCD_BIN_DIR ]; then
     mkdir -p $ETCD_BIN_DIR
     mkdir -p $ETCD_DATA_DIR
     mkdir -p $ETCD_WAL_DIR
fi

### 2.Install etcd binary of kubernetes.
if [ ! -f "$SOFTWARE/etcd-${VERSION}-linux-amd64.tar.gz" ]; then
     sudo wget $DOWNLOAD_URL -P $SOFTWARE >>/tmp/install.log  2>&1
fi

cd $SOFTWARE && tar -xzf etcd-${VERSION}-linux-amd64.tar.gz -C ./
cp -fp etcd-${VERSION}-linux-amd64/etcd* $ETCD_BIN_DIR
ln -sf  $ETCD_BIN_DIR/{etcd,etcdctl} /usr/local/bin
sudo chmod -R 755 $ETCD_INSTALL_PATH
sudo chown -R $USER:$USER $ETCD_INSTALL_PATH
2.2 创建 etcd 的 systemd unit 启动服务文件
cat >/usr/lib/systemd/system/etcd.service<
  • WorkingDirectory、--data-dir：指定工作目录和数据目录为 ${ETCD_DATA_DIR}，需在启动服务前创建这个目录；
  • --wal-dir：指定 wal 目录，为了提高性能，一般使用 SSD 或者和 --data-dir 不同的磁盘；
  • --name：指定节点名称，当 --initial-cluster-state 值为 new 时，--name 的参数值必须位于 --initial-cluster 列表中；
  • --cert-file、--key-file：etcd server 与 client 通信时使用的证书和私钥；
  • --trusted-ca-file：签名 client 证书的 CA 证书，用于验证 client 证书；
  • --peer-cert-file、--peer-key-file：etcd 与 peer 通信使用的证书和私钥；
  • --peer-trusted-ca-file：签名 peer 证书的 CA 证书，用于验证 peer 证书；
2.3 启动 etcd 服务并检查启动状态
启动etcd服务
systemctl  etcd.service start
检查etcd启动状态
systemctl status etcd|grep Active

确保状态为 active (running)，否则查看日志，确认原因：

sudo journalctl -u etcd
验证etcd服务状态及查看当前leader

验证etcd服务状态

ETCDCTL_API=3 etcdctl \
  --endpoints=${ETCD_ENPOIDTS} \
  --cacert=/etc/k8s/ssl/ca.pem \
  --cert=/etc/k8s/ssl/etcd.pem \
  --key=/etc/k8s/ssl/etcd-key.pem endpoint health

当输出值为以下状态即为正常：
https://10.10.10.22:2379 is healthy: successfully committed proposal: took = 3.693346ms
https://10.10.10.23:2379 is healthy: successfully committed proposal: took = 2.80687ms
https://10.10.10.24:2379 is healthy: successfully committed proposal: took = 4.493037ms

查看当前leader

ETCDCTL_API=3 etcdctl \
  --endpoints=${ETCD_ENPOIDTS} \
  --cacert=/etc/k8s/ssl/ca.pem \
  --cert=/etc/k8s/ssl/etcd.pem \
  --key=/etc/k8s/ssl/etcd-key.pem endpoint status

输出：
https://10.10.10.22:2379, 641670f7677ceff, 3.3.13, 2.9 MB, false, 2, 6198986
https://10.10.10.23:2379, ce37122364c277fa, 3.3.13, 2.9 MB, true, 2, 6198986
https://10.10.10.24:2379, 4d1003897626ccde, 3.3.13, 2.9 MB, false, 2, 6198986
  • 当前leader为master-k8s-n02

到这里，整个etcd集群就部署完成，关于更多的etcd操作可以阅读etcd官方文档，部署好etcd数据库，开部署kubernetes master节点相关组件，请参考：kubernetes集群安装指南：apiserver节点组件部署，关于etcd脚本请从此处获取；

上一篇：kubernetes集群安装指南：kube-apiserver组件部署

下一篇：vSphere使用vCenter server进行虚拟主机管理

相关内容

热门资讯

特朗普下令不打了，美国的“余粮... 可以说戛然而止，快得让很多人都无法适应。前两周，每一天美国都要打击伊朗一通。就在7月24日白宫会议前...
穆杰塔巴最新表态：支持黎真主党 △伊朗最高领袖穆杰塔巴·哈梅内伊（资料图）当地时间7月26日晚，伊朗最高领袖穆杰塔巴·哈梅内伊对黎巴...
美军瘫痪一艘驶向伊朗的油轮，特... 美国总统特朗普虽下令暂停打击伊朗，但美军仍在执行对霍尔木兹海峡的封锁任务。针对美军瘫痪一艘驶向伊朗油...
“小牌大耍”的底气到底是哪里来... 澎湃首席评论员 李平这两天，“艺人李权哲乘高铁占座事件”在网上引发热议，该艺人参加的活动主办方曾发布...
越南籍船舶南海遇险沉没，中方已... 据凤凰卫视报道，一艘越南船舶7月24日夜间在越南庆和以东220海里附近遇险沉没，船上共62名越南籍人...
李权哲占座、蒙面、装死：娱乐圈... 你买了一张高铁一等座的票，找到自己的位置，18A。有人坐着。你拿出手机看了眼购票记录——没错，18A...
杭州景区咖啡店闯入1条幼蛇，仅... 夏天气温高、湿度大，蛇类活动进入高峰期，千万别被“小蛇无害”的刻板印象骗了！有些幼蛇看着迷你可爱，实...
AI开源公开信签署企业增至50... IT之家 7 月 26 日消息，英伟达、微软、IBM、Meta 等 25 家美国科技企业本周（7 月...
南阳快手短视频代运营企业的服务... 在短视频平台快速发展的背景下，企业通过快手等渠道进行内容运营已成为常见的市场动作。对于希望借助短视频...
普通人该如何跟上科技发展的步伐 这个被称作科技的词汇, 听起来既有宏大之感, 又颇为遥远, 好似仅仅归属于在实验室里专心致志钻研的科...