Kubernetes GKE 拨号后端时出错：EOF on random exec 命令

问：

在 GKE 上，我们在 API 上遇到了一些随机错误。 很多年前，我们有“拨号后端时出错：EOF”。

我们在 K8s 之上使用 Jenkins 来管理我们的构建。不久前，作业因此错误而终止：

Executing shell script inside container [protobuf] of pod [kubernetes-bad0aa993add416e80bdc1e66d1b30fc-536045ac8bbe]
java.net.ProtocolException: Expected HTTP 101 response but was '500 Internal Server Error'
    at com.squareup.okhttp.ws.WebSocketCall.createWebSocket(WebSocketCall.java:123)
    at com.squareup.okhttp.ws.WebSocketCall.access$000(WebSocketCall.java:40)
    at com.squareup.okhttp.ws.WebSocketCall$1.onResponse(WebSocketCall.java:98)
    at com.squareup.okhttp.Call$AsyncCall.execute(Call.java:177)
    at com.squareup.okhttp.internal.NamedRunnable.run(NamedRunnable.java:33)
    at 


  java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142)
    at 

 java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617)
    at java.lang.Thread.run(Thread.java:745)

这个案例看起来很像：https://gitlab.com/gitlab-org/gitlab-runner/issues/3247

许多审核日志 URL：

permission:  "io.k8s.core.v1.pods.exec.create"     
resource:  "core/v1/namespaces/default/pods/pubsub-6132c0bc-2542-46a2-8041-c865f238698d-4ccc0-c1nkz-lqg5x/exec/pubsub-6132c0bc-2542-46a2-8041-c865f238698d-4ccc0-c1nkz-lqg5x"     

和

permission:  "io.k8s.core.v1.pods.exec.get"     
resource:  "core/v1/namespaces/default/pods/pubsub-a5a21f14-0bd1-4338-87b1-8658c3bbc7ad-9gm4n-8nz14/exec"     

但我不明白为什么这个错误会出现在 Kubernetes 上......

更新：

这些错误可以通过 kube-state-metrics 进行验证，其中有 2 个： - ssh_tunnel_open_count - ssh_tunnel_open_fail_count

对我来说，随着 200 多个 ssh 隧道的打开，开放隧道 ssh 失败的数量会增长。

作为信息，我们用 GKE 做了一些测试 - SWITH从区域集群到区域集群 - 使用新的本地 IP（旧的别名 IP） 但这并不能解决问题。

在 node-pool 上禁用自动缩放后，我们不再出现错误。