【Kubernetes】Ingress Nginx安装使用

Ingress Nginx官方地址:
https://kubernetes.github.io/ingress-nginx/deploy/
https://kubernetes.github.io/ingress-nginx/deploy/baremetal/

在Kubenetes集群中,要使得我们的微服务可以被集群外的机器访问,就得为每个微服务暴漏一个端口,一方面这样不安全,另一方面端口数量有限,所以需要用到类似ingress nginx类型工具来进行内部dns管理。

ingress nginx安装很简单,可以通过helm或者kubectl进行安装,对于国内来说,在没有vpn的情况下,我们没法下载google的东西,所以一般不用helm安装,或者用helm安装需要提前下载好相关文件。相反用kubectl安装相对简单。

对于我们自建集群来说,都可以说是 Bare metal clusters,所以我们使用的是:

kubectl apply -f https://raw.githubusercontent.com/kubernetes/ingress-nginx/controller-v1.2.0/deploy/static/provider/baremetal/deploy.yaml

在裸机集群中使用Ingress Nginx,有多种模式,这里根据个人实践,描叙一下三种模式:LoadBalancer、NodePort、HostNetwork。

  1. LoadBalancer 模式
    这种模式,需要把上面的deploy.yaml中ingress-nginx-controller的Service中的type改为Balancer:
type: LoadBalancer

我们知道自建集群是不支持负载均衡的,所以需要安装metallb插件,安装方法也很简单:
首先修改kube-proxy的配置,添加strictARP: true

apiVersion: kubeproxy.config.k8s.io/v1alpha1
kind: KubeProxyConfiguration
mode: "ipvs"
ipvs:
  strictARP: true

然后运行:

kubectl apply -f https://raw.githubusercontent.com/metallb/metallb/v0.12.1/manifests/namespace.yaml
kubectl apply -f https://raw.githubusercontent.com/metallb/metallb/v0.12.1/manifests/metallb.yaml

如果无法下载,可以先去github复制相关文件保存到本地。

然后config.yaml:

apiVersion: v1
kind: ConfigMap
metadata:
  namespace: metallb-system
  name: config
data:
  config: |
    address-pools:
    - name: default
      protocol: layer2
      addresses:
      - 192.168.106.120-192.168.106.128

运行 kubectl apply -f onfig.yaml 后,运行命令kubectl -n ingress-nginx get svc,就会看到

$ kubectl -n ingress-nginx get svc
NAME                   TYPE          CLUSTER-IP     EXTERNAL-IP  PORT(S)
ingress-nginx          LoadBalancer  192.168.106.120   203.0.113.10  80:30100/TCP,443:30101/TCP

然后我们就可以直接在浏览器中输入 http://192.168.106.120,可以发现可以访问我们的ingress-nginx服务。
注意这里给负载均衡用的地址范围不能是master或node的实际地址。

  1. NodePort模式
    这里是指不安装metallb的情况下。这里我得到的实践结果与官方有一定差别。
    官方推荐设置如下:
    添加externalTrafficPolicy: Local
    添加externalIPs(可选)
apiVersion: v1
kind: Service
metadata:
  labels:
    app.kubernetes.io/component: controller
    app.kubernetes.io/instance: ingress-nginx
    app.kubernetes.io/name: ingress-nginx
    app.kubernetes.io/part-of: ingress-nginx
    app.kubernetes.io/version: 1.2.0
  name: ingress-nginx-controller
  namespace: ingress-nginx
spec:
  externalTrafficPolicy: Local
  ipFamilies:
  - IPv4
  ipFamilyPolicy: SingleStack
  ports:
  - appProtocol: http
    name: http
    port: 80
    protocol: TCP
    targetPort: http
  - appProtocol: https
    name: https
    port: 443
    protocol: TCP
    targetPort: https
  selector:
    app.kubernetes.io/component: controller
    app.kubernetes.io/instance: ingress-nginx
    app.kubernetes.io/name: ingress-nginx
  type: NodePort
  externalIPs:
  - 193.168.108.129

实验结果是如果externalIPs使用的是VIP,而不是master或node的实际ip,只有在master机器上可以curl 193.168.108.129,即直接访问80端口,在其它机器上不行,其它机器只能使用ip:nodeport 来访问。externalIPs使用的是运行ingress机器的实际ip,或者不干脆不设置,只能通过nodeip:nodeport来访问。

  1. Hostnetwork模式
    如下配置:
template:
  spec:
    hostNetwork: true

这种情况下可以将ingress nginx的service删除,可以直接通过nodeip(即80端口)访问相关服务。通过kubectl get ing 可以获得相关地址

$ kubectl get ingress -o wide
NAME           HOSTS               ADDRESS                   PORTS
test-ingress   myapp.example.com   203.0.113.2,203.0.113.3   80

如果想自定义Ingress上报时的IP也很容易,给nginx-ingress-controller加上–publish-status-address启动参数就行。


版权声明:本文为dingpwen原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。