[Spark on K8S] Client 模式下 Executor Pod 垃圾回收

[fuhaiq]

嗨~ 目前使用 Kyuubi 1.6.0 提交 Spark 任务到 K8S，模式为 Client，隔离级别为 Connection，当 JDBC 断开后，Executor Pod 状态为 Succeeded，并不会删除，当遗留 Pod 达到一定数量后，Kyuubi 会拒绝链接

后来看到 Spark 对 Client 模式垃圾回收做了说明，于是设置了 spark.kubernetes.driver.pod.name 指向 Kyuubi Pod Name，可以看到 Executor Pod 已经含有 Controlled By 属性

但仍不能删除遗留 Executor Pod，官方的说法是，当 Driver 删除后，关联的 Executor 才会删除，这里 Driver 是跑在 Kyuubi 里面的，肯定不能把 Kyuubi 删掉，大家有什么好的方法么？

which in turn will ensure that once the driver pod is deleted from the cluster, all of the application’s executor pods will also be deleted