P1 · 應會
MLOps
容器編排平台 (Kubernetes, K8s)
是什麼
Kubernetes 是容器編排(Container Orchestration)平台,負責管理大量容器化服務的部署、擴縮、負載平衡、故障自我修復與滾動更新,本身不訓練模型也不提供運算加速。
解決什麼問題
讓模型服務能以容器形式穩定上線,依流量自動擴展,並在節點故障時自動重啟或搬移服務。
考場 Trigger
- 容器編排
- 模型服務自動擴展與自我修復
- Pod、Deployment
- 管理大量 Docker 容器
容易搞混
水平擴展與自動伸縮機器學習維運模型部署與效能
中級深度
能說出 Kubernetes 管的是部署、擴縮與運行環境,並排除「它負責訓練或加速」的錯誤選項。