我在AWS
上有一个主节点和两个工作节点kubernetes集群。我在集群中有两个环境(qc和prod),并且创建了两个 namespace 。
我在qc
和prod
命名空间上运行了相同的服务。
我已经为两个 namespace 创建了入口。
apiVersion: extensions/v1beta1
kind: Ingress
metadata:
name: my-ingress
namespace: prod
spec:
rules:
- host: "*.qc-k8s.example.com"
http:
paths:
- path: /app
backend:
serviceName: client-svc
servicePort: 80
---
apiVersion: extensions/v1beta1
kind: Ingress
metadata:
name: my-ingress
namespace: qc
spec:
rules:
- host: "*.qc-k8s.example.com"
http:
paths:
- path: /app-qc
backend:
serviceName: client-svc
servicePort: 80
我在
client-svc
和qc
命名空间中都有prod
并打开节点端口80。然后,我创建了
ELB
服务和daemonset
,如下所示。kind: Service
apiVersion: v1
metadata:
name: ingress-svc
namespace: deafult
annotations:
service.beta.kubernetes.io/aws-load-balancer-ssl-cert: arn:aws:acm:ca-central-1:492276880714:certificate/xxxxxxxxxxxxxx
service.beta.kubernetes.io/aws-load-balancer-ssl-ports: "443"
service.beta.kubernetes.io/aws-load-balancer-backend-protocol: http
spec:
type: LoadBalancer
selector:
app: my-app
ports:
- name: http
port: 80
targetPort: http
- name: https
port: 443
targetPort: http
---
apiVersion: extensions/v1beta1
kind: DaemonSet
metadata:
name: ingress-nginx
namespace: deafult
spec:
template:
metadata:
labels:
app: my-app
spec:
terminationGracePeriodSeconds: 60
containers:
- image: gcr.io/google_containers/nginx-ingress-controller:0.9.0-beta.6
name: ingress-nginx
imagePullPolicy: Always
ports:
- name: http
containerPort: 80
hostPort: 80
livenessProbe:
httpGet:
path: /healthz
port: 10254
scheme: HTTP
initialDelaySeconds: 30
timeoutSeconds: 5
readinessProbe:
httpGet:
path: /healthz
port: 10254
scheme: HTTP
env:
- name: POD_NAME
valueFrom:
fieldRef:
fieldPath: metadata.name
- name: POD_NAMESPACE
valueFrom:
fieldRef:
fieldPath: metadata.namespace
resources:
limits:
cpu: 100m
memory: 100Mi
requests:
cpu: 100m
memory: 100Mi
args:
- /nginx-ingress-controller
- --default-backend-service=$(POD_NAMESPACE)/nginx-default-backend
当我尝试 curl
curl -iv https://gayan.qc-k8s.example.com/app/
时。然后我得到一个错误。2017/06/27 15:43:31 [错误] 158#158:* 981连接到上游时,connect()失败(111:连接被拒绝),客户端:209.128.50.138,服务器:gayan.qc-k8s.example .com,请求:“GET / app / HTTP / 1.1”,上游:“http://100.82.2.47:80/app/”,主机:“gayan.qc-k8s.example.com”
209.128.50.138-[209.128.50.138,209.128.50.138]--[27 / Jun / 2017:15:43:31 +0000]“GET / app / HTTP / 1.1” 500 193“-”“curl / 7.51.0 “198 0.014 100.82.2.47:80,100.96.2.48:80 0,193 0.001,0.013 502,500
如果我 curl
curl -iv https://gayan.qc-k8s.example.com/app-qc
,我会遇到同样的问题。以前有人遇到过此错误吗?任何解决此问题的线索?
谢谢
最佳答案
我用https://github.com/kubernetes/kubernetes/issues/17088解决了
我们使用一个真实文档中的示例:
apiVersion: extensions/v1beta1
kind: Ingress
metadata:
name: ingress
namespace: dev-1
spec:
rules:
- host: api-gateway-dev-1.faceit.com
http:
paths:
- backend:
serviceName: api-gateway
servicePort: 80
path: /
- host: api-shop-dev-1.faceit.com
http:
paths:
- backend:
serviceName: api-shop
servicePort: 80
path: /
- host: api-search-dev-1.faceit.com
http:
paths:
- backend:
serviceName: api-search
servicePort: 8080
path: /
tls:
- hosts:
- api-gateway-dev-1.faceit.com
- api-search-dev-1.faceit.com
- api-shop-dev-1.faceit.com
secretName: faceitssl
我们为每个轨道的每个命名空间都使用其中之一。
然后,我们有了一个带有Ingress Controller的 namespace ,该Controller运行自动配置的NGINX Pod。另一个AWS负载平衡器指向这些 pods ,这些 pods 在DaPortSet上的NodePort上运行,最多可在集群中的每个节点上至少运行一个。
这样,流量便被路由:
互联网-> AWS ELB-> NGINX(在节点上)-> Pod
在按预期使用Ingress的同时,我们保持 namespace 之间的隔离。使用一个入口击中多个 namespace 是不正确甚至是明智的。鉴于它们是如何设计的,这只是没有意义。解决方案是对每个 namespace 使用一个入口,并使用一个集群范围的入口 Controller 来实际执行路由。