Как настроить GRPC Ingress на GKE (с nginx-ingress)

Доброе утро. У меня есть сервер GRPC, который я хочу обслуживать на Google Kubernetes Engine. В моем кластере уже установлен контроллер nginx-ingress, и в настоящее время я использую его для обслуживания трафика http / https. Это входной ресурс, который я пытался создать для размещения сервера GRPC:

apiVersion: networking.k8s.io/v1beta1
kind: Ingress
metadata:
  name: grpc-ingress-nginx
  annotations:
    kubernetes.io/ingress.class: "nginx"
    nginx.ingress.kubernetes.io/backend-protocol: "GRPC"
    cert-manager.io/cluster-issuer: "letsencrypt-prod"
    nginx.ingress.kubernetes.io/grpc-backend: "true"
    nginx.ingress.kubernetes.io/ssl-redirect: "true"
  namespace: default
spec:
  tls:
  - hosts:
    - bar.foo.com
    secretName: reploy-tls
  rules:
  - host: bar.foo.com
    http:
      paths:
      - backend:                                                                                                                                                                                                      
          serviceName: bar-backend-service
          servicePort: 50051

А вот сервис / развертывание приложения:

apiVersion: v1
kind: Service
metadata:
  name: bar-backend-service
  namespace: default
spec:
  selector:
    app: bar-backend-app
  ports:
  - port: 50051
    targetPort: 50051
    name: grpc
---
apiVersion: apps/v1beta1
kind: Deployment
metadata:
  name: bar-backend
  labels:
    app: bar-backend-app
  namespace: default
spec:
  replicas: 1
  template:
    metadata:
      labels:
        app: bar-backend-app
    spec:
      containers:
      - name: bar-backend-image
        image: gcr.io/himank-jay/bar-backend-image:TAG
        ports:
        - containerPort: 50051
          name: grpc

Когда я запускаю grpc_cli ls bar.foo.com:443 (используя grpc_cli), я получаю следующая ошибка:

{"created":"@1580833741.460274000","description":"Error received from peer ipv4:x.x.x.x:x","file":"src/core/lib/surface/call.cc","file_line":1055,"grpc_message":"Socket closed","grpc_status":14}

А ошибка от nginx-controller такая:

x.x.x.x - - [04/Feb/2020:16:28:46 +0000] "PRI * HTTP/2.0" 400 157 "-" "-" 0 0.020 [] [] - - - - xxxxx

Есть идеи, что здесь не так? Или есть мысли о том, как это отладить?


person Jay K.    schedule 03.02.2020    source источник


Ответы (1)


Сервер обслуживает HTTP / 1.x, а не HTTP / 2, который требуется для gRPC.

Вы можете попробовать добавить следующую аннотацию в конфигурацию Ingress

nginx.ingress.kubernetes.io/backend-protocol: "GRPC"

... как объяснено здесь.

Также стоит проверить флаг use-http2 в nginx конфигурация (по умолчанию она должна быть включена true).


ИЗМЕНИТЬ, относительно новой ошибки:

PRI * HTTP/2.0 - это так называемое HTTP / 2 Connection Preface - часть согласование HTTP / 2. По-прежнему кажется, что nginx не настроен для HTTP / 2.

person gears    schedule 03.02.2020
comment
Я отредактировал свой ответ выше; теперь после исправления проблемы с сертификатом появляется другая ошибка. - person Jay K.; 04.02.2020
comment
Я добавил объяснение об ошибке запроса PRI * HTTP/2.0. - person gears; 04.02.2020
comment
К сожалению, здесь не повезло. Решили просто выставить набор стручков перед type: LoadBalancer по умолчанию. - person Jay K.; 05.02.2020
comment
По-прежнему ничего об этом @JayK. ? Мне нужен Ingress, так как мне нужно перенаправить с domain.com на IP (и тогда я не могу указать порт) - person Emixam23; 23.03.2020
comment
@ Emixam23 для этого конкретного решения, все равно не повезло. Недавно я наткнулся на следующее: cloud.google.com/load-balancing/ docs / Вы можете использовать стандартный облачный балансировщик нагрузки Google для своей службы для перенаправления трафика http2 / grpc. Я не пробовал это, но похоже, что вы можете установить правила доменного имени, которые хотите получить. - person Jay K.; 24.03.2020