阿里云ACK创建Ingress失败解决心得

前言

最近在使用阿里云K8s ACK创建集群，并发布前后台应用，在使用过程中创建无状态应用和SVC都没问题，但当创建Ingress时报错，于是联系客服小哥一起终于把问题解决了，现在记录下来分享给大家。

创建Ingress失败

下图就是我通过页面创建Ingress时报的错

错误详情：APISERVER_500

Internal error occurred: failed calling webhook "validate.nginx.ingress.kubernetes.io": Post https://ingress-nginx-controller-admission.kube-system.svc:443/networking/v1beta1/ingresses?timeout=10s: dial tcp 172.20.0.42:8443: connect: connection refused

API: /apiProxy/mirana/cn-hangzhou/cc836d2047d1d46738b1f17101831239c/apis/extensions/v1beta1/namespaces/default/ingresses.json

RequestID: 23424e0a-6a54-45a6-a1d5-faa3c5124189

1、然后发起工单问询客服小哥，接着小哥让我更新下nginx-ingress-controller组件，如图所示

从0.33升级到0.44，但是发现一直升级不成功！

2、接着，客服小哥又给了我一个解决方案，就是删除nginx-ingress-controller再重新新建。

kubectl get get svc -n kube-system nginx-ingress-lb
kubectl delete deployment nginx-ingress-controller -n kube-system 
kubectl apply -f nginx-ingress-controller.yaml

nginx-ingress-controller.yaml：

apiVersion: v1
kind: Service
metadata:
  annotations:
    service.beta.kubernetes.io/alibaba-cloud-loadbalancer-address-type: "intranet"     ##  intranet是私网   internet是公网
    service.beta.kubernetes.io/alibaba-cloud-loadbalancer-id: "your-slb-id"   ##  替换为slb id
    service.beta.kubernetes.io/alibaba-cloud-loadbalancer-force-override-listeners: "true"  ##  强制覆盖已有监听
  labels:
    app: nginx-ingress-lb
  name: nginx-ingress-lb
  namespace: kube-system
spec:
  externalTrafficPolicy: Local
  ports:
    - name: http
      port: 80
      protocol: TCP
      targetPort: 80
    - name: https
      port: 443
      protocol: TCP
      targetPort: 443
  selector:
    app: ingress-nginx
  sessionAffinity: None
  type: LoadBalancer

当我删除nginx-ingress-controller时发现ACK自动创建的SLB也一并删除了，然后使用小哥发的nginx-ingress-controller.yaml文件创建了新的nginx-ingress-controller service，里面的slb id要替换成你自己的真实SLB id(重新创建个SLB吧)。

现在创建成功之后，我发现创建ingress还是报一开始的错，而且升级nginx-ingress-controller组件也不成功，也就是说并没起到作用！

3、然后我自己通过ACK控制台事件一栏发现如下的错

0/2 nodes are available: 2 node(s) didn't match pod affinity/anti-affinity, 2 node(s) didn't satisfy existing pods anti-affinity rules.

然后提供给客服小哥，小哥给了我一个解决方案：ingress-controller的副本缩容为0，再设置成2，如下所示：

kubectl -n kube-system scale --replicas=0 deployment/nginx-ingress-controller
kubectl -n kube-system scale --replicas=2 deployment/nginx-ingress-controller

通过上述的两个命令，发现不管是创建ingress还是升级nginx-ingress-controller都成功了，可喜可贺！

总结

阿里云创建ACK的时候会自动创建nginx-ingress-controller的SLB和API Server的SLB

注意

只有通过删除nginx-ingress-controller才能删除对应的SLB

引用

Pod 使用 pod 亲和性 的示例
Kubernetes Ingress Controller 高可靠部署最佳实践
【Kubernetes】Pod学习（八）Pod调度：定向调度与亲和性调度
K8S 创建 Service