51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程软考华为认证厂商认证IT技术PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

一篇带给你ETCD入门指南

作者：华仔
开发 前端
之前对etcd不是很了解，于是下定决心学习一下。随手把过程记录了一下，希望对大家有帮助。

[[412381]]

前言

之前对etcd不是很了解，于是下定决心学习一下。随手把过程记录了一下，希望对大家有帮助。

环境说明如下：

一、集群搭建

我这里将etcd部署在虚拟机上，采取静态配置，即在etcd各节点在配置中指定。

1.所有节点下载etcd并解压、移动至/usr/local/bin/，并给予对应权限

# 下载地址：https://github.com/etcd-io/etcd/releases 
wget https://github.com/coreos/etcd/releases/download/v3.4.16/etcd-v3.4.16-linux-amd64.tar.gz 
tar -zxvf etcd-v3.4.16-linux-amd64.tar.gz 
cd etcd* 
mv etcdctl etcd /usr/local/bin 
chmod +x /usr/local/bin/etcd* 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.

2.证书文件

# 证书文件 ca-config.json etcd-ca-csr.json etcd-csr.json 
cat ca-config.json 
{ 
  "signing": { 
    "default": { 
      "expiry": "876000h" 
    }, 
    "profiles": { 
      "kubernetes": { 
        "usages": [ 
            "signing", 
            "key encipherment", 
            "server auth", 
            "client auth" 
        ], 
        "expiry": "876000h" 
      } 
    } 
  } 
} 
 
cat etcd-ca-csr-json 
{ 
  "CN": "etcd", 
  "key": { 
    "algo": "rsa", 
    "size": 2048 
  }, 
  "names": [ 
    { 
      "C": "CN", 
      "ST": "Shenzhen", 
      "L": "Shenzhen", 
      "O": "etcd", 
      "OU": "Etcd Security" 
    } 
  ] 
} 
 
 
cat etcd-csr.json 
{ 
    "CN": "etcd", 
    "hosts": [ 
      "127.0.0.1", 
      "10.211.55.50", 
      "10.211.55.51", 
      "10.211.55.52" 
    ], 
    "key": { 
        "algo": "rsa", 
        "size": 2048 
    }, 
    "names": [ 
        { 
            "C": "CN", 
            "ST": "Shenzhen", 
            "L": "Shenzhen", 
            "O": "etcd", 
            "OU": "Etcd Security" 
        } 
    ] 
} 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
  • 31.
  • 32.
  • 33.
  • 34.
  • 35.
  • 36.
  • 37.
  • 38.
  • 39.
  • 40.
  • 41.
  • 42.
  • 43.
  • 44.
  • 45.
  • 46.
  • 47.
  • 48.
  • 49.
  • 50.
  • 51.
  • 52.
  • 53.
  • 54.
  • 55.
  • 56.
  • 57.
  • 58.
  • 59.
  • 60.
  • 61.
  • 62.
  • 63.

3.etcd-ca证书

cfssl gencert -initca etcd-ca-csr.json | cfssljson -bare etcd-ca 
# 查看证书文件 
[root@etcd1 opt]# ls -al 
total 36 
drwxr-xr-x.  2 root root  186 May 13 21:53 . 
dr-xr-xr-x. 17 root root  244 Oct 21  2020 .. 
-rw-------   1 root root  294 Nov 27  2019 ca-config.json 
-rw-r--r--   1 root root 1005 May 13 21:53 etcd-ca.csr 
-rw-------   1 root root  212 Nov 27  2019 etcd-ca-csr.json 
-rw-------   1 root root 1675 May 13 21:53 etcd-ca-key.pem 
-rw-r--r--   1 root root 1371 May 13 21:53 etcd-ca.pem 
-rw-------   1 root root  374 May 13 21:48 etcd-csr.json 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.

4.生成etcd证书

cfssl gencert -ca=etcd-ca.pem -ca-key=etcd-ca-key.pem -config=ca-config.json -profile=kubernetes etcd-csr.json | cfssljson -bare etcd 
# 查看证书 
ls -al 
total 36 
drwxr-xr-x.  2 root root  186 May 13 21:53 . 
dr-xr-xr-x. 17 root root  244 Oct 21  2020 .. 
-rw-------   1 root root  294 Nov 27  2019 ca-config.json 
-rw-r--r--   1 root root 1005 May 13 21:53 etcd-ca.csr 
-rw-------   1 root root  212 Nov 27  2019 etcd-ca-csr.json 
-rw-------   1 root root 1675 May 13 21:53 etcd-ca-key.pem 
-rw-r--r--   1 root root 1371 May 13 21:53 etcd-ca.pem 
-rw-r--r--   1 root root 1078 May 13 21:53 etcd.csr 
-rw-------   1 root root  374 May 13 21:48 etcd-csr.json 
-rw-------   1 root root 1679 May 13 21:53 etcd-key.pem 
-rw-r--r--   1 root root 1456 May 13 21:53 etcd.pem 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.

5.复制到etcd的证书到证书目录

mkdir -pv /etc/etcd/ssl && cp etcd*.pem /etc/etcd/ssl 
# 复制证书目录到其他节点 
scp -r /etc/etcd root@etcd2 
scp -r /etc/etcd root@etcd3 

  • 1.
  • 2.
  • 3.
  • 4.

6.配置成系统服务

cat etcd.service # 要根据每个节点进行修改IP和name 
[Unit] 
Description=Etcd Server 
After=network.target 
After=network-online.target 
Wants=network-online.target 
Documentation=https://github.com/coreos 
[Service] 
Type=notify 
WorkingDirectory=/var/lib/etcd/ 
EnvironmentFile=-/etc/etcd/etcd.conf 
ExecStart=/usr/local/bin/etcd \ 
--name=etcd1 \ 
--cert-file=/etc/etcd/ssl/etcd.pem \ 
--key-file=/etc/etcd/ssl/etcd-key.pem \ 
--peer-cert-file=/etc/etcd/ssl/etcd.pem \ 
--peer-key-file=/etc/etcd/ssl/etcd-key.pem \ 
--trusted-ca-file=/etc/etcd/ssl/etcd-ca.pem \ 
--peer-trusted-ca-file=/etc/etcd/ssl/etcd-ca.pem \ 
--initial-advertise-peer-urls=https://10.211.55.50:2380 \ 
--listen-peer-urls=https://10.211.55.50:2380 \ 
--listen-client-urls=https://10.211.55.50:2379,http://127.0.0.1:2379 \ 
--advertise-client-urls=https://10.211.55.50:2379 \ 
--initial-cluster-token=etcd-cluster-0 \ 
--initial-cluster=etcd1=https://10.211.55.50:2380,etcd2=https://10.211.55.51:2380,etcd3=https://10.211.55.52:2380 \ 
--initial-cluster-state=new \ 
--data-dir=/var/lib/etcd 
Restart=on-failure 
RestartSec=5 
LimitNOFILE=65536 
[Install] 
WantedBy=multi-user.target 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
  • 31.
  • 32.

7.启动etcd

# 三个节点启动etcd服务 
systemctl daemon-reload && systemctl enable etcd && systemctl start etcd 

  • 1.
  • 2.

8.检查集群状态

# 检查member 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.52:2379 member list -w table 
+------------------+---------+-------+---------------------------+---------------------------+------------+ 
|        ID        | STATUS  | NAME  |        PEER ADDRS         |       CLIENT ADDRS        | IS LEARNER | 
+------------------+---------+-------+---------------------------+---------------------------+------------+ 
|  ca2cb14b2acc776 | started | etcd3 | https://10.211.55.52:2380 | https://10.211.55.52:2379 |      false | 
| 31f517c6aefb1a37 | started | etcd1 | https://10.211.55.50:2380 | https://10.211.55.50:2379 |      false | 
| ad1ee26f89ef12f4 | started | etcd2 | https://10.211.55.51:2380 | https://10.211.55.51:2379 |      false | 
+------------------+---------+-------+---------------------------+---------------------------+------------+ 
 
# 查看是否有LD 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 endpoint status -w table 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
|         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
| https://10.211.55.50:2379 | 31f517c6aefb1a37 |  3.4.16 |   25 kB |      true |      false |       645 |         54 |                 54 |        | 
| https://10.211.55.51:2379 | ad1ee26f89ef12f4 |  3.4.16 |   20 kB |     false |      false |       645 |         54 |                 54 |        | 
| https://10.211.55.52:2379 |  ca2cb14b2acc776 |  3.4.16 |   20 kB |     false |      false |       645 |         54 |                 54 |        | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
 
# 尝试写入数据 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379  put foo4 bar4 
 
# 读取数据 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 get  foo4 
foo4 
bar4 
 
# 获取所有key 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 get --prefix  --keys-only '' 
foo 
foo2 
foo3 
foo4 
 
# 只获取value 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 get  --print-value-only --prefix=true '' 
bar 
bar2 
bar3 
bar 
 
# 获取指定key、rev的数据 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 get  foo4 -w json 
{"header":{"cluster_id":9218922165880849559,"member_id":910513364439713654,"revision":10,"raft_term":645},"kvs":[{"key":"Zm9vNA==","create_revision":7,"mod_revision":10,"version":4,"value":"eGl5YW5neGl4aQ=="}],"count":1} 
 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 get  foo4 -w json --rev=8 
{"header":{"cluster_id":9218922165880849559,"member_id":3599809619259234871,"revision":10,"raft_term":645},"kvs":[{"key":"Zm9vNA==","create_revision":7,"mod_revision":8,"version":2,"value":"eGl5YW5neGl4aWE="}],"count":1} 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
  • 31.
  • 32.
  • 33.
  • 34.
  • 35.
  • 36.
  • 37.
  • 38.
  • 39.
  • 40.
  • 41.
  • 42.
  • 43.
  • 44.
  • 45.
  • 46.
  • 47.
  • 48.

二、成员变更

删除成员

因为我的资源有限，所以先模拟删除成员再添加成员。

# 先检查集群状态并获取成员ID 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 endpoint status -w table 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
|         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
| https://10.211.55.50:2379 | 31f517c6aefb1a37 |  3.4.16 |   25 kB |      true |      false |       645 |         54 |                 54 |        | 
| https://10.211.55.51:2379 | ad1ee26f89ef12f4 |  3.4.16 |   20 kB |     false |      false |       645 |         54 |                 54 |        | 
| https://10.211.55.52:2379 |  ca2cb14b2acc776 |  3.4.16 |   20 kB |     false |      false |       645 |         54 |                 54 |        | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
 
# 通过ID删除成员，这里以删除10.211.55.52为例 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379 member remove ca2cb14b2acc776 
Member  ca2cb14b2acc776 removed from cluster 7ff030ddad4d8497 
 
# 检查集群状态，只有两个节点了 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 endpoint status -w table 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
|         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
| https://10.211.55.50:2379 | 31f517c6aefb1a37 |  3.4.16 |   25 kB |      true |      false |       645 |         58 |                 58 |        | 
| https://10.211.55.51:2379 | ad1ee26f89ef12f4 |  3.4.16 |   20 kB |     false |      false |       645 |         58 |                 58 |        | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
 
# 查看10.211.55.52 etcd状态，发现etcd 
systemctl status etcd 
● etcd.service - Etcd Server 
   Loaded: loaded (/etc/systemd/system/etcd.service; enabled; vendor preset: disabled) 
   Active: inactive (dead) since Sun 2021-07-04 11:39:42 CST; 1min 31s ago 
   ...... 
    
# 尝试写入数据 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379  put foo4 bar8 
OK 
 
# 尝试获取写入的数据 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379  get  foo4  
foo4 
bar8 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
  • 31.
  • 32.
  • 33.
  • 34.
  • 35.
  • 36.
  • 37.
  • 38.

添加成员

添加成员主要分为两步，一是通过etcdctl添加成员，二是根据第一步输出的配置修改etcd配置并启动etcd

# 先通过etcdctl添加成员 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379  member add etcd3 --peer-urls="https://10.211.55.52:2380" 
Member 89088d035064124d added to cluster 7ff030ddad4d8497 
 
ETCD_NAME="etcd3" 
ETCD_INITIAL_CLUSTER="etcd1=https://10.211.55.50:2380,etcd3=https://10.211.55.52:2380,etcd2=https://10.211.55.51:2380" 
ETCD_INITIAL_ADVERTISE_PEER_URLS="https://10.211.55.52:2380" 
ETCD_INITIAL_CLUSTER_STATE="existing" 
 
# 更改etcd配置并启动etcd，注意要保证etcd数据目录为空 
systemctl cat etcd 
# /etc/systemd/system/etcd.service 
[Unit] 
Description=Etcd Server 
After=network.target 
After=network-online.target 
Wants=network-online.target 
Documentation=https://github.com/coreos 
[Service] 
Type=notify 
WorkingDirectory=/var/lib/etcd/ 
EnvironmentFile=-/etc/etcd/etcd.conf 
ExecStart=/usr/local/bin/etcd \ 
--name=etcd3 \ 
--cert-file=/etc/etcd/ssl/etcd.pem \ 
--key-file=/etc/etcd/ssl/etcd-key.pem \ 
--peer-cert-file=/etc/etcd/ssl/etcd.pem \ 
--peer-key-file=/etc/etcd/ssl/etcd-key.pem \ 
--trusted-ca-file=/etc/etcd/ssl/etcd-ca.pem \ 
--peer-trusted-ca-file=/etc/etcd/ssl/etcd-ca.pem \ 
--initial-advertise-peer-urls=https://10.211.55.52:2380 \ 
--listen-peer-urls=https://10.211.55.52:2380 \ 
--listen-client-urls=https://10.211.55.52:2379,http://127.0.0.1:2379 \ 
--advertise-client-urls=https://10.211.55.52:2379 \ 
--initial-cluster-token=etcd-cluster-0 \ 
--initial-cluster=etcd1=https://10.211.55.50:2380,etcd2=https://10.211.55.51:2380,etcd3=https://10.211.55.52:2380 \ 
--initial-cluster-state=existing \ 
--data-dir=/var/lib/etcd 
Restart=on-failure 
RestartSec=5 
LimitNOFILE=65536 
[Install] 
WantedBy=multi-user.target 
 
# 启动etcd 
systemctl start etcd && systemctl status etcd 
 
# 检查集群状态 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 endpoint status -w table 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
|         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
| https://10.211.55.50:2379 | 31f517c6aefb1a37 |  3.4.16 |   25 kB |      true |      false |       645 |         62 |                 62 |        | 
| https://10.211.55.51:2379 | ad1ee26f89ef12f4 |  3.4.16 |   20 kB |     false |      false |       645 |         62 |                 62 |        | 
| https://10.211.55.52:2379 | 89088d035064124d |  3.4.16 |   20 kB |     false |      false |       645 |         62 |                 62 |        | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
  • 31.
  • 32.
  • 33.
  • 34.
  • 35.
  • 36.
  • 37.
  • 38.
  • 39.
  • 40.
  • 41.
  • 42.
  • 43.
  • 44.
  • 45.
  • 46.
  • 47.
  • 48.
  • 49.
  • 50.
  • 51.
  • 52.
  • 53.
  • 54.
  • 55.
  • 56.

三、数据备份

数据备份我这里直接使用snapshot人工备份好了，仅用于测试而已。

# 先写入一个数据，方便后面做测试 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379  put xiyangxixi  boys 
OK 
 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379  get xiyangxixi 
xiyangxixi 
boys 
 
# 备份数据 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379 snapshot save snapshot-xiyangxixi.db 
{"level":"info","ts":1625373129.2212617,"caller":"snapshot/v3_snapshot.go:119","msg":"created temporary db file","path":"snapshot-xiyangxixi.db.part"} 
{"level":"info","ts":"2021-07-04T12:32:09.228+0800","caller":"clientv3/maintenance.go:200","msg":"opened snapshot stream; downloading"} 
{"level":"info","ts":1625373129.2287908,"caller":"snapshot/v3_snapshot.go:127","msg":"fetching snapshot","endpoint":"https://10.211.55.50:2379"} 
{"level":"info","ts":"2021-07-04T12:32:09.231+0800","caller":"clientv3/maintenance.go:208","msg":"completed snapshot read; closing"} 
{"level":"info","ts":1625373129.2318149,"caller":"snapshot/v3_snapshot.go:142","msg":"fetched snapshot","endpoint":"https://10.211.55.50:2379","size":"25 kB","took":0.010441635} 
{"level":"info","ts":1625373129.2318769,"caller":"snapshot/v3_snapshot.go:152","msg":"saved","path":"snapshot-xiyangxixi.db"} 
Snapshot saved at snapshot-xiyangxixi.db 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.

四、集群数据恢复

需要使用同一个备份文件。这里以上面的snapshot-xiyangxixi.db进行模拟。

# 注意： 
# 1、最好指定一下data-dir我这里没指定，结果数据都到etcd1.etcd、etcd2.etcd、etcd3.etcd中去了，这样子还得修改etcd.service文件 
# 2、恢复数据前，之前的数据目录记得备份 
# 3、如果是单节点故障，可以考虑删除该节点再添加该节点 
# etcd1上执行 
etcdctl snapshot restore /root/snapshot-xiyangxixi.db  --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem  --name etcd1 --initial-advertise-peer-urls=https://10.211.55.50:2380 --initial-cluster-token=etcd-cluster-1 --initial-cluster=etcd1=https://10.211.55.50:2380,etcd2=https://10.211.55.51:2380,etcd3=https://10.211.55.52:2380 
{"level":"info","ts":1625373977.7445557,"caller":"snapshot/v3_snapshot.go:296","msg":"restoring snapshot","path":"/root/snapshot-xiyangxixi.db","wal-dir":"etcd1.etcd/member/wal","data-dir":"etcd1.etcd","snap-dir":"etcd1.etcd/member/snap"} 
{"level":"info","ts":1625373977.7477813,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"517f2ff3c4b9581b","added-peer-peer-urls":["https://10.211.55.52:2380"]} 
{"level":"info","ts":1625373977.7478256,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"6856401bd8388bec","added-peer-peer-urls":["https://10.211.55.50:2380"]} 
{"level":"info","ts":1625373977.7478426,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"6ea7d2ec70c556d5","added-peer-peer-urls":["https://10.211.55.51:2380"]} 
{"level":"info","ts":1625373977.7509031,"caller":"snapshot/v3_snapshot.go:309","msg":"restored snapshot","path":"/root/snapshot-xiyangxixi.db","wal-dir":"etcd1.etcd/member/wal","data-dir":"etcd1.etcd","snap-dir":"etcd1.etcd/member/snap"} 
 
# etcd2上执行 
etcdctl snapshot restore /root/snapshot-xiyangxixi.db  --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem  --name etcd2 --initial-advertise-peer-urls=https://10.211.55.51:2380 --initial-cluster-token=etcd-cluster-1 --initial-cluster=etcd1=https://10.211.55.50:2380,etcd2=https://10.211.55.51:2380,etcd3=https://10.211.55.52:2380 
{"level":"info","ts":1625374104.1673598,"caller":"snapshot/v3_snapshot.go:296","msg":"restoring snapshot","path":"/root/snapshot-xiyangxixi.db","wal-dir":"etcd2.etcd/member/wal","data-dir":"etcd2.etcd","snap-dir":"etcd2.etcd/member/snap"} 
{"level":"info","ts":1625374104.1709266,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"517f2ff3c4b9581b","added-peer-peer-urls":["https://10.211.55.52:2380"]} 
{"level":"info","ts":1625374104.1709714,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"6856401bd8388bec","added-peer-peer-urls":["https://10.211.55.50:2380"]} 
{"level":"info","ts":1625374104.1709878,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"6ea7d2ec70c556d5","added-peer-peer-urls":["https://10.211.55.51:2380"]} 
{"level":"info","ts":1625374104.1741195,"caller":"snapshot/v3_snapshot.go:309","msg":"restored snapshot","path":"/root/snapshot-xiyangxixi.db","wal-dir":"etcd2.etcd/member/wal","data-dir":"etcd2.etcd","snap-dir":"etcd2.etcd/member/snap"} 
 
# etcd3上执行 
etcdctl snapshot restore /root/snapshot-xiyangxixi.db  --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem  --name etcd3 --initial-advertise-peer-urls=https://10.211.55.52:2380 --initial-cluster-token=etcd-cluster-1 --initial-cluster=etcd1=https://10.211.55.50:2380,etcd2=https://10.211.55.51:2380,etcd3=https://10.211.55.52:2380 
{"level":"info","ts":1625374158.713205,"caller":"snapshot/v3_snapshot.go:296","msg":"restoring snapshot","path":"/root/snapshot-xiyangxixi.db","wal-dir":"etcd3.etcd/member/wal","data-dir":"etcd3.etcd","snap-dir":"etcd3.etcd/member/snap"} 
{"level":"info","ts":1625374158.7164843,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"517f2ff3c4b9581b","added-peer-peer-urls":["https://10.211.55.52:2380"]} 
{"level":"info","ts":1625374158.7165308,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"6856401bd8388bec","added-peer-peer-urls":["https://10.211.55.50:2380"]} 
{"level":"info","ts":1625374158.7165465,"caller":"membership/cluster.go:392","msg":"added member","cluster-id":"a914ec3525c16b4","local-member-id":"0","added-peer-id":"6ea7d2ec70c556d5","added-peer-peer-urls":["https://10.211.55.51:2380"]} 
{"level":"info","ts":1625374158.7190611,"caller":"snapshot/v3_snapshot.go:309","msg":"restored snapshot","path":"/root/snapshot-xiyangxixi.db","wal-dir":"etcd3.etcd/member/wal","data-dir":"etcd3.etcd","snap-dir":"etcd3.etcd/member/snap"} 
 
# 启动etcd 
systemctl daemon-reload && systemctl start etcd 
 
# 查看etcd集群状态 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379 endpoint status -w table 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
|         ENDPOINT          |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
| https://10.211.55.50:2379 | 6856401bd8388bec |  3.4.16 |   25 kB |     false |      false |         4 |          8 |                  8 |        | 
| https://10.211.55.51:2379 | 6ea7d2ec70c556d5 |  3.4.16 |   25 kB |      true |      false |         4 |          8 |                  8 |        | 
| https://10.211.55.52:2379 | 517f2ff3c4b9581b |  3.4.16 |   25 kB |     false |      false |         4 |          8 |                  8 |        | 
+---------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+ 
 
# 获取key为xiyangxixi的数据 
etcdctl --cacert /etc/etcd/ssl/etcd-ca.pem --cert /etc/etcd/ssl/etcd.pem  --key /etc/etcd/ssl/etcd-key.pem --endpoints=https://10.211.55.50:2379,https://10.211.55.51:2379,https://10.211.55.52:2379  get xiyangxixi 
xiyangxixi 
boys 

  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
  • 31.
  • 32.
  • 33.
  • 34.
  • 35.
  • 36.
  • 37.
  • 38.
  • 39.
  • 40.
  • 41.
  • 42.
  • 43.
  • 44.
  • 45.

参考

  • https://etcd.io/docs/v3.4/op-guide/hardware/
  • https://etcd.io/docs/v3.4/op-guide/recovery/
  • https://etcd.io/docs/v3.4/op-guide/clustering/

本文转载自微信公众号「运维开发故事」，可以通过以下二维码关注。转载本文请联系运维开发故事公众号。

 

责任编辑：姜华 来源： 运维开发故事
etcd-wal模块解析数据库
相关推荐
一篇带给你 MySQL 不完全入门指南
由于MySQL的整个体系太过于庞大，文章的篇幅有限，不能够完全的覆盖所有的方面。所以我会尽可能的从更加贴进我们日常使用的方式来进行解释。

2021-08-18 10:28:09

MySQL SQL 语句数据库
带给你一篇Elasticsearch入门文章
Elasticsearch(以下简称ES)是我想写想了很久的一个系列，因为他是我在老东家离职前刚接触的最后一个新技术，当时就是对某子业务的商品搜索做改造，从MySQL迁移商品数据到ES中。

2021-01-28 08:55:48

Elasticsear数据库数据存储
一篇带给你 React 18 升级指南
今天我们从使用者的角度来探索下React17升级到18会遇到的问题和一些新增的功能。

2022-03-24 12:28:03

React 17React 18React
一篇文章带给你Etcd-Raft学习
raft算法本质上是一个大的状态机，任何的操作例如选举、提交数据等，最后都被封装成一个消息结构体，输入到raft算法库的状态机中。raft算法其实由好几个协议组成，etcdraft将其统一定义在了Message结构体之中。

2021-06-16 14:44:32

etcd-raftRaftLeader
一篇带给你etcd与分布式锁
可以提供分布式锁功能的组件有多种，但是每一种都有自己的脾气与性格。至于选择哪一种组件，则要看数据对业务的重要性，数据要求强一致性推荐支持CP的etcd、zookeeper，数据允许少量丢失、不要求强一致性的推荐支持AP的Redis。

2021-05-19 08:12:39

etcd分布式锁分布式系统
一篇带给你Zookeeper教程：入门篇
对于Zookeeper，其官方文档上的解释是：它是一个分布式服务框架，是ApacheHadoop的一个子项目，它主要是用来解决分布式应用中经常遇到的一些数据管理问题。

2022-07-06 07:57:37

Zookeeper分布式服务框架
一篇带给你SpringBoot + Spring Security入门
这篇文章主要介绍了SpringBoot+SpringSecurity简单入门

2020-12-24 08:07:18

SpringBootSpring SecuWeb
一篇带给你SpringCloud Sleuth入门介绍
总结本篇文章主要介绍了Sleuth的入门知识,并且整合Zipkin来可视化显示调用链路的整体情况,但是目前Zipkin数据存在于内存中,我们可以在接入Elasticsearch等工具来做数据持久化。

2021-06-28 10:04:12

SpringCloudSleuth微服务
一篇带给你Web Components上手指南
WebComponents本身不是一个单独的规范，而是由一组DOMAPI和HTML规范所组成，用于创建可复用的自定义名字的HTML标签，并且可以直接在你的Web应用中使用。

2021-02-24 08:32:45

Web Compone前端Web 应用
一篇带给你Spring Cloud Sleuth入门介绍
本篇文章主要介绍了Sleuth的入门知识,并且整合Zipkin来可视化显示调用链路的整体情况,但是目前Zipkin数据存在于内存中,我们可以在接入Elasticsearch等工具来做数据持久化。

2021-06-07 12:06:19

SpringCloud Sleuth微服务
一篇带给你SkyWalking UI篇
SkyWalking是一个针对分布式系统的APM（应用性能监控）系统，特别针对微服务、cloudnative和容器化架构，其核心是个分布式追踪系统。

2021-07-12 06:11:14

SkyWalking 仪表板UI篇
一篇带给你 ActiveMQ 详细入门教程
两个系统或两个客户端之间进行消息传送，利用高效可靠的消息传递机制进行平台无关的数据交流，并基于数据通信来进行分布式系统的集成。

2021-10-14 09:58:24

消息中间件ActiveMQ Java
一篇带给你React Hooks完全上手指南
Hooks是函数组件独有的。只能在函数组件的顶级作用域使用；只能在函数组件或者其他Hooks中使用。

2022-03-03 22:00:19

Hooks函数组件React
一篇带给你Vscode调试Node.js指南
调试代码不管对于开发还是学习源码都是非常重要的技能，本文简单介绍vscode调试Node.js相关代码的调试技巧。

2021-08-25 06:33:52

Node.jsVscode调试工具
一篇带给你Vite 功能概览
对非常基础的使用来说，使用Vite开发和使用一个静态文件服务器并没有太大区别。然而，Vite还通过原生ESM导入提供了许多主要用于打包场景的增强功能。

2021-06-21 14:36:46

Vite 前端工程化工具
一篇带给你VS使用技巧
VS编辑区域指的是通过VS打开.cs文件的窗口,在窗口内可以编写程序代码。

2023-03-29 07:45:58

VS编辑区编程工具
一篇带给你CountDownLatch实现原理
CountDownLatch是多线程中一个比较重要的概念，它可以使得一个或多个线程等待其他线程执行完毕之后再执行。

2021-04-08 11:00:56

CountDownLaJava进阶开发
一篇带给你MySQL锁机制
锁按照锁粒度分为：全局锁、表锁和行锁。行锁是引擎层的实现，我们文中描述的行锁都是基于InnoDB存储引擎的实现。InnoDB的行锁采用的两阶段锁协议，锁在需要的时候添加，只有在事务commit或者rollback时才会一次性释放所有锁。

2021-04-01 10:51:55

MySQL锁机制数据库
一篇带给你MySQL逻辑架构
与其他数据库相比，MySQL并不是完美的，却是足够灵活，能够适应高要求的环境。在开发中，MySQL是勾勾在项目中的首选数据库。为了更好的应用MySQL，充分发挥它的性能，就必须要理解它的设计。从这篇文章开始，我们就开始学习MySQL数据库的基础知识。

2021-03-12 09:21:31

MySQL数据库逻辑架构
一篇带给你 Java Class 详解
class文件的结构分析就到这里了，通过一个简单的类去探索编译器如何实现类的编写，那么再复杂的类我们也能一步一步分析出来，只是需要我们更加细心。

2022-04-29 14:38:49

class文件结构分析
点赞
收藏

51CTO技术栈公众号

业务
速览
在线客服