我在AWS上有一个主节点和两个工作节点kubernetes集群。我在集群中有两个环境(qc和prod),并且创建了两个 namespace 。
我在qcprod命名空间上运行了相同的服务。

我已经为两个 namespace 创建了入口。

apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: my-ingress
  namespace: prod
spec:
  rules:
  - host: "*.qc-k8s.example.com"
    http:
      paths:
      - path: /app
        backend:
          serviceName: client-svc
          servicePort: 80
---
apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: my-ingress
  namespace: qc
spec:
  rules:
  - host: "*.qc-k8s.example.com"
    http:
      paths:
      - path: /app-qc
        backend:
          serviceName: client-svc
          servicePort: 80

我在client-svcqc命名空间中都有prod并打开节点端口80。
然后,我创建了ELB服务和daemonset,如下所示。
kind: Service
apiVersion: v1
metadata:
  name: ingress-svc
  namespace: deafult
  annotations:
    service.beta.kubernetes.io/aws-load-balancer-ssl-cert: arn:aws:acm:ca-central-1:492276880714:certificate/xxxxxxxxxxxxxx
    service.beta.kubernetes.io/aws-load-balancer-ssl-ports: "443"
    service.beta.kubernetes.io/aws-load-balancer-backend-protocol: http
spec:
  type: LoadBalancer
  selector:
    app: my-app
  ports:
  - name: http
    port: 80
    targetPort: http
  - name: https
    port: 443
    targetPort: http
---
apiVersion: extensions/v1beta1
kind: DaemonSet
metadata:
  name: ingress-nginx
  namespace: deafult
spec:
  template:
    metadata:
      labels:
        app: my-app
    spec:
      terminationGracePeriodSeconds: 60
      containers:
      - image: gcr.io/google_containers/nginx-ingress-controller:0.9.0-beta.6
        name: ingress-nginx
        imagePullPolicy: Always
        ports:
          - name: http
            containerPort: 80
            hostPort: 80
        livenessProbe:
          httpGet:
            path: /healthz
            port: 10254
            scheme: HTTP
          initialDelaySeconds: 30
          timeoutSeconds: 5
        readinessProbe:
          httpGet:
            path: /healthz
            port: 10254
            scheme: HTTP
        env:
          - name: POD_NAME
            valueFrom:
              fieldRef:
                fieldPath: metadata.name
          - name: POD_NAMESPACE
            valueFrom:
              fieldRef:
                fieldPath: metadata.namespace
        resources:
          limits:
            cpu: 100m
            memory: 100Mi
          requests:
            cpu: 100m
            memory: 100Mi
        args:
        - /nginx-ingress-controller
        - --default-backend-service=$(POD_NAMESPACE)/nginx-default-backend

当我尝试 curl curl -iv https://gayan.qc-k8s.example.com/app/时。然后我得到一个错误。

2017/06/27 15:43:31 [错误] 158#158:* 981连接到上游时,connect()失败(111:连接被拒绝),客户端:209.128.50.138,服务器:gayan.qc-k8s.example .com,请求:“GET / app / HTTP / 1.1”,上游:“http://100.82.2.47:80/app/”,主机:“gayan.qc-k8s.example.com”
209.128.50.138-[209.128.50.138,209.128.50.138]--[27 / Jun / 2017:15:43:31 +0000]“GET / app / HTTP / 1.1” 500 193“-”“curl / 7.51.0 “198 0.014 100.82.2.47:80,100.96.2.48:80 0,193 0.001,0.013 502,500


如果我 curl curl -iv https://gayan.qc-k8s.example.com/app-qc,我会遇到同样的问题。
以前有人遇到过此错误吗?任何解决此问题的线索?

谢谢

最佳答案

我用https://github.com/kubernetes/kubernetes/issues/17088解决了

我们使用一个真实文档中的示例:

  apiVersion: extensions/v1beta1
  kind: Ingress
  metadata:
    name: ingress
    namespace: dev-1
  spec:
    rules:
    - host: api-gateway-dev-1.faceit.com
      http:
        paths:
        - backend:
            serviceName: api-gateway
            servicePort: 80
          path: /
    - host: api-shop-dev-1.faceit.com
      http:
        paths:
        - backend:
            serviceName: api-shop
            servicePort: 80
          path: /
    - host: api-search-dev-1.faceit.com
      http:
        paths:
        - backend:
            serviceName: api-search
            servicePort: 8080
          path: /
    tls:
    - hosts:
      - api-gateway-dev-1.faceit.com
      - api-search-dev-1.faceit.com
      - api-shop-dev-1.faceit.com
      secretName: faceitssl

我们为每个轨道的每个命名空间都使用其中之一。

然后,我们有了一个带有Ingress Controller的 namespace ,该Controller运行自动配置的NGINX Pod。另一个AWS负载平衡器指向这些 pods ,这些 pods 在DaPortSet上的NodePort上运行,最多可在集群中的每个节点上至少运行一个。

这样,流量便被路由:

互联网-> AWS ELB-> NGINX(在节点上)-> Pod

在按预期使用Ingress的同时,我们保持 namespace 之间的隔离。使用一个入口击中多个 namespace 是不正确甚至是明智的。鉴于它们是如何设计的,这只是没有意义。解决方案是对每个 namespace 使用一个入口,并使用一个集群范围的入口 Controller 来实际执行路由。

08-07 17:22