kubernetes与velero的第一次尝试

背景

接上文:Kubernetes中gitlab的一次迁移。nexus也要迁移一下。这里更想体验一些velero。很多文章上面看到过:https://mp.weixin.qq.com/s/VC6kVfcBCUQfG6RwM6F1QA腾讯云TKE文档中也有类似的例子:https://cloud.tencent.com/document/product/457/50122。不想使用传统方式了想体验一下velero!
so velero迁移一下kube-ops namespace 到另外一个集群的kube-ops1 namespace

velero 迁移kubernetes体验

1. 下载安装 velero

注意: 1-3步骤在备份和还原集群上面都要操作安装
https://github.com/vmware-tanzu/velero看了一眼最新版本1.18.1.就下载了对应版本linux-amd64.tar.gz(墙裂,下载不下来。为是下载了放在自己的对象存储上面了!)

[root@sh-master-02 ~]# wget https://github.com/vmware-tanzu/velero/releases/download/v1.8.1/velero-v1.8.1-linux-amd64.tar.gz
[root@sh-master-02 ~]# tar zxvf velero-v1.8.1-linux-amd64.tar.gz 
[root@sh-master-02 ~]# cd velero-v1.8.1-linux-amd64/
[root@sh-master-02 velero-v1.8.1-linux-amd64]# cp velero /usr/local/bin && chmod +x /usr/local/bin/velero
[root@sh-master-02 velero-v1.8.1-linux-amd64]# velero version

image.png

2. 关于对象存储的开通

阳明大佬还有其他很多文章都是采用了minio.腾讯云的cos 还有 阿里云的oss也是可以的。偷懒了直接使用cos!
先创建一个对象存储桶
image.png

3. 配置安装velero服务端

配置密钥文件:
cat credentials-velero

[default]
aws_access_key_id=<access key id>
aws_secret_access_key=<secret access key>

按照如下命令安装 velero 服务端:

velero install  --provider aws --plugins velero/velero-plugin-for-aws:v1.1.0 --bucket  kubernetes-xxxx \
--secret-file credentials-velero \
--use-restic \
--default-volumes-to-restic \
--backup-location-config \
region=ap-guangzhou,s3ForcePathStyle="true",s3Url=https://cos.ap-guangzhou.myqcloud.com

注意:gion s3 url bucket为腾讯与oos对应参数基本要配置的就是bucket存储桶名词 还有地域!
image.png
image.png
等待velero命名空间下pod running!

[root@sh-master-02 velero]# kubectl get pods -n velero

image.png

4. 备份集群1 kube-ops集群内应用

1. velero backup create命令直接创建

[root@sh-master-02 velero]# velero backup create kube-ops --include-namespaces kube-ops --default-volumes-to-restic

PKokHyEcVj.png

2. yaml方式创建

cat migrate-kube-ops-2022-03-18-01-backup.yaml

apiVersion: velero.io/v1
kind: Backup
metadata: 
  name: migrate-kube-ops-2022-03-18-01-backup
  # 必须得是 velero 安装的命名空间
  namespace: velero
spec: 
  # 仅包含 nginx-example 命名空间的资源
  includedNamespaces: 
   - kube-ops
  # 包含不区分命名空间的资源
  includeClusterResources: false 
  # 备份数据存储位置指定
  storageLocation: default 
  # 卷快照存储位置指定
  volumeSnapshotLocations: 
    - default 
  # 使用 restic 备份卷
  defaultVolumesToRestic: true

注意:includeClusterResources: false 这个地方一定记得false看腾讯与官方文档写的true!我备份失败了......如果有失败看下这个参数!

[root@sh-master-02 velero]#kubectl apply -f migrate-kube-ops-2022-03-18-01-backup.yaml

image.png
注意: backup create 任务的命名要具有唯一性。建立新的命名任务要用不同的名称!

2. 登陆腾讯云cos管理后台查看备份文件创建

image.png

5. 将kube-ops命名空间下应用还原到集群2kube-ops1命名空间下

注:登陆集群2(要还原的集群)前提1-3已经操作
cat restore.yaml

apiVersion: velero.io/v1
kind: Restore
metadata: 
  name: migrate-kube-ops1-restore
  namespace: velero
spec: 
  backupName: kube-ops
  includedNamespaces: 
    - kube-ops
  
  # 按需填写需要恢复的资源类型,nginx-example 命名空间下没有想要排除的资源,所以这里直接写 '*'
  includedResources: 
    - '*'
  
  includeClusterResources: null
  
  # 还原时不包含的资源,这里额外排除 StorageClasses 资源类型。
  excludedResources: 
    - storageclasses.storage.k8s.io
 
  # 使用 labelSelector 选择器选择具有特定 label 的资源,由于此示例中无须再使用 label 选择器筛选,这里先注释。
  # labelSelector:
  #   matchLabels:
  #     app: nginx
  
  # 设置命名空间关系映射策略
  namespaceMapping: 
    kube-ops: kube-ops1
  restorePVs: true
[root@k8s-master-01 velero]# kubectl apply -f  restore.yaml
[root@k8s-master-01 velero]# velero describe restore migrate-kube-ops1-restore

Om4ykpRDqA.png
等待状态 Pase completed......
image.png
注意:还原的任务也要具有唯一性
等待pod running发现ingress ingressroute没有备份过来
WG8EXoEHzT.png

6. 创建对应ingress ingressroute 登陆gitlab nexus,并修改host or dns解析进行测试:

image.png
image.png
目的基本实现 将一个namespace 下应用迁移到了另外一个集群的namespace下!

更进一步的想法

  1. 其实开始为想得是只备份还原nexus单个应用....下次体验一些备份还原单个应用
  2. 存储类的区别。开始本来想导入tke集群的。且按照腾讯云官方文档:https://cloud.tencent.com/document/product/457/52331.做了持久卷动态映射

    apiVersion: v1
    kind: ConfigMap
    metadata: 
      name: change-storage-class-config
      namespace: velero
      labels: 
     velero.io/plugin-config: ""
     velero.io/change-storage-class: RestoreItemAction
    data: 
      # 存储类名映射到腾讯云动态存储类 cbs
      cbs-csi: cbs
    

    但是导入的时候没有生效还是找cbs-csi存储类!。所以就先导入到有cbs-csi存储类的集群了。具体替换存储类要好好研究一下!

  3. ingress ingress为什么没有备份....有时间研究一下
  4. 特别感谢:https://velero.io/docs/v1.8/csi/

    https://mp.weixin.qq.com/s/VC6kVfcBCUQfG6RwM6F1QA https://cloud.tencent.com/document/product/457/52331


29 声望
9 粉丝
0 条评论
推荐阅读
centos8下messages or secure文件为空
顺便看了一眼/var/logs目录下:messages secure文件为空( journalctl是可以查看日志的!),看了一眼rsyslog status:

对你无可奈何阅读 154

Helm3-安装RabbitMQ
最近在使用k8s搭建微服务时,发现需要手动修改yaml文件里面的pod name、pod image、svc name、ingress tls等等,非常麻烦,但是有了helm之后情况就不一样了,helm是k8s的包管理器,类似ubuntu的apt-get,centos的...

Awbeci阅读 9.5k

Kubernetes Gateway API 深入解读和落地指南
Kubernetes Gateway API 是 Kubernetes 1.18 版本引入的一种新的 API 规范,是 Kubernetes 官方正在开发的新的 API,Ingress 是 Kubernetes 已有的 API。Gateway API 会成为 Ingress 的下一代替代方案。Gateway A...

Rainbond2阅读 413

Jvm调优与微服务资源分配
在没有接触微服务之前,我们的java程序一般都部署在WebLogic、Tomcat这类应用服务器上,这些应用服务器本身也是基于Jvm虚拟机的。一般我们统一对应用服务器做Jvm参数调优(分配多大内存,线程池限制等),而不用...

KerryWu阅读 6.1k

K8S-使用Helm安装RabbitMQ和Redis的总结
记得去年2021上半年的时候自学了k8s并且使用helm安装了rabbitmq和redis,可以在开发、测试和生产环境上用起来,但是下半年之后就没有用,再拾起来的时候发现好多知识点都忘了,这篇文章就是总结使用helm安装rabbm...

Awbeci1阅读 1.9k

Kubernetes v1.27 新特性一览
Kubernetes v1.27 是 2023 年的第一个大版本更新,包含了近 60 项主要的更新。 而 1.26 只有 37 项,所以这个版本可以说是一个变化非常显著的版本了。

张晋涛1阅读 1k

封面图
实战:用“廉价”的NFS作为K8S后端存储
大家都知道,NFS是一种基于网络的文件系统协议,允许在不同的机器之间共享文件系统资源。在K8S中,可以使用NFS作为后端存储,以提供持久化存储和共享存储卷。但是否适合在生产环境使用NFS作为后端存储,这取决于...

不背锅运维2阅读 713

29 声望
9 粉丝
宣传栏