Spark on K8S 的幾種模式

Standalone：在 K8S 啟動一個長期運行的集群，所有 Job 都通過 spark-submit 向這個集群提交
Kubernetes Native：通過 spark-submit 直接向 K8S 的 API Server 提交，申請到資源后啟動 Pod 做為 Driver 和 Executor 執行 Job，參考 http://spark.apache.org/docs/2.4.6/running-on-kubernetes.html
Spark Operator：安裝 Spark Operator，然后定義 spark-app.yaml，再執行 kubectl apply -f spark-app.yaml，這種申明式 API 和調用方式是 K8S 的典型應用方式，參考 https://github.com/GoogleCloudPlatform/spark-on-k8s-operator

參考鏈接：
https://www.cnblogs.com/moonlight-lin/p/13296909.html

總結

以上是生活随笔為你收集整理的Spark on K8S 的几种模式的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。