1 / 4概念
Kubernetes
Kubernetes 把“我要什么”写进 API,由控制器不断把实际状态拉回期望状态。判断标准不是“会不会写 YAML”,而是能不能解释一个 Pod 为什么 Pending、为什么被驱逐、为什么滚动发布卡住。
1 概念
1.1 一句话定义
Kubernetes 是一个声明式容器编排系统:控制面保存期望状态,调度器把 Pod 放到节点,kubelet 与容器运行时执行,控制器持续比较实际状态与期望状态并修正差异。
1.2 它解决什么问题
- 调度:按资源、亲和性、污点把 Pod 放到合适节点。
- 自愈:容器退出、节点失联、探针失败时自动重启或迁移。
- 滚动发布:按批次替换 Pod,失败可回滚。
- 服务发现:Service 给动态 Pod 一个稳定虚拟 IP 和 DNS 名。
- 弹性:HPA 按指标扩缩,PDB 在维护时保护可用性。
没有编排,容器只能手工部署;节点故障、扩缩容和发布都需要人盯着。
1.3 不属于本页的内容
| 主题 | 去哪 |
|---|---|
| 镜像构建、层与容器隔离 | Docker |
| 服务间 mTLS、重试与灰度 | Service Mesh |
| 云资源、网络与集群本身的 IaC | Terraform |
| 应用指标、日志与追踪后端 | Fault Tolerance & Observability |
1.4 关键术语
| 术语 | 含义 | 容易混淆的点 |
|---|---|---|
| Control plane | apiserver、etcd、scheduler、controller-manager | 不是工作负载节点 |
| Pod | 最小调度单元,一个或多个共享网络的容器 | 不是长期稳定的部署单元 |
| Deployment | 管理 ReplicaSet 与滚动发布 | 不是 StatefulSet |
| StatefulSet | 稳定网络标识与有序卷 | 不是“有状态”唯一选择 |
| Service | 稳定虚拟 IP + 端口到 Pod 的映射 | 不是 Ingress |
| Ingress | L7 入口路由规则 | 不是 Service |
| Probe | liveness/readiness/startup | 不是健康检查的全部 |
| HPA | 水平 Pod 自动扩缩 | 不是集群扩缩 |
2 机制
2.1 心智模型
Kubernetes 是一个调谐循环:你写 spec,控制器读 status,两者不一致就采取动作。Pod 是调度的原子单位,Service 是稳定入口,控制器是“把差异补齐”的执行者。节点故障时,不是 Pod 被“移动”,而是控制器在新节点创建新 Pod。
2.2 机制拆解
- 提交:
kubectl apply把对象写入 apiserver,apiserver 持久化到 etcd 并通知 watcher。 - 调度:scheduler 过滤(资源、污点、亲和性)再打分,选中节点后写
nodeName。 - 运行:kubelet watch 到绑定到本节点的 Pod,调用 CRI 拉镜像、创建沙箱、启动容器;CNI 分配网络,kube-proxy/ebpf 实现 Service 转发。
- 调谐:Deployment 控制器创建/更新 ReplicaSet,ReplicaSet 维持副本;StatefulSet 按序号创建;Job 到完成。
- 发布:Deployment 用 maxSurge/maxUnavailable 控制批次;readiness 通过才接流量;失败按 revision 回滚。
- 弹性:HPA 读 metrics-server/自定义指标,按目标利用率调整副本;Cluster Autoscaler 增删节点。
- 中断:驱逐、维护、缩容时,PDB 限制同时不可用的 Pod 数量。
2.3 完整枚举
| 分类 | 成员 | 关键属性 | 适用 |
|---|---|---|---|
| 工作负载 | Pod、Deployment、ReplicaSet、StatefulSet、DaemonSet、Job、CronJob | 副本、顺序、节点范围、完成语义 | 无状态/有状态/守护/批处理 |
| Service | ClusterIP、NodePort、LoadBalancer、ExternalName、Headless | 虚拟 IP、端口映射、DNS | 集群内/外暴露 |
| 探针 | liveness、readiness、startup | 失败动作与阈值不同 | 重启/摘流/慢启动 |
| QoS | Guaranteed、Burstable、BestEffort | requests/limits 组合 | 驱逐优先级 |
| 调度 | nodeSelector、affinity、anti-affinity、taints/tolerations、topologySpread | 硬/软约束 | 放置与高可用 |
| 自动扩缩 | HPA、VPA、Cluster Autoscaler、KEDA | 指标与扩缩对象 | 副本/资源/节点/事件驱动 |
Pod 阶段:
| 阶段 | 含义 | 常见原因 |
|---|---|---|
| Pending | 已创建但未运行 | 资源不足、污点、未调度、镜像未拉取 |
| Running | 至少一个容器运行 | 可能未 Ready |
| Succeeded | 所有容器成功退出 | Job 正常完成 |
| Failed | 至少一个容器失败退出 | 启动/运行错误 |
2.4 关键数字与量级
| 指标 | 量级 | 说明 |
|---|---|---|
| etcd 副本 | 3 或 5 | 容忍 1 或 2 个故障 |
| 终止宽限期 | 默认 30 秒 | terminationGracePeriodSeconds |
| HPA 同步 | 15 秒 | 指标延迟会影响扩缩 |
| 资源 request | 必须设置 | 调度依据;limit 决定 cgroup 上限 |
3 实践
3.1 最小示例
apiVersion: apps/v1
kind: Deployment
metadata: {name: checkout}
spec:
replicas: 3
selector: {matchLabels: {app: checkout}}
template:
metadata: {labels: {app: checkout}}
spec:
containers:
- name: app
image: registry.example.com/checkout@sha256:abc123
ports: [{containerPort: 3000}]
resources:
requests: {cpu: 100m, memory: 128Mi}
limits: {cpu: 500m, memory: 512Mi}
readinessProbe: {httpGet: {path: /healthz, port: 3000}, periodSeconds: 5}
livenessProbe: {httpGet: {path: /livez, port: 3000}, periodSeconds: 10}
---
apiVersion: v1
kind: Service
metadata: {name: checkout}
spec:
selector: {app: checkout}
ports: [{port: 80, targetPort: 3000}]
3.2 常用操作与参数
| 操作 | 命令 / API | 说明 |
|---|---|---|
| 查看 | kubectl get pod,deploy,svc -n prod | 先看状态与事件 |
| 诊断 | kubectl describe pod <pod> | Events 常直接给出根因 |
| 日志 | kubectl logs <pod> -c app --tail=200 | 多容器要指定 -c |
| 发布 | kubectl rollout status deploy/checkout | 等待完成或超时 |
3.3 标准流程
- 为工作负载选控制器:无状态 Deployment、有状态 StatefulSet、每节点 DaemonSet、批处理 Job。
- 设 requests/limits 与探针;readiness 失败只摘流,liveness 失败才重启。
- 用 Service 暴露集群内访问,Ingress/Gateway 暴露集群外访问。
- 配置放 ConfigMap,敏感数据放 Secret 并启用加密/外部密钥管理。
- 配 HPA/PDB,用滚动发布 + readiness 验证,失败回滚,并演练节点失联与驱逐。
3.4 与相邻技术的组合
- Docker:Kubernetes 通过 CRI 运行容器镜像,镜像 digest 决定版本。
- 服务网格:mesh 在 Pod 旁注入代理,负责 mTLS、重试与 L7 观测。
- Terraform:集群、节点池、网络和云资源由 IaC 管理,K8s 管工作负载。
3.5 选型维度
| 维度 | 取值 | 影响 |
|---|---|---|
| 托管 / 自建 | EKS/GKE/AKS / 自建 | 控制面运维与成本 |
| 工作负载 | 无状态 / 有状态 / 批处理 | 控制器与存储选择 |
| 弹性 | HPA / KEDA / 节点池 | 指标与冷启动 |
| 团队能力 | 有平台团队 / 无 | 自建控制面风险 |
3.6 决策规则
- 无状态 Web 服务:Deployment + Service + HPA,优先托管集群。
- 有状态数据库:优先托管数据库;必须自建时用 StatefulSet + 稳定卷 + 备份。
- 每节点代理/日志采集:DaemonSet。
- 定时任务:CronJob,配并发策略与失败保留。
- 入口只做 L7 路由:Ingress/Gateway;需要东西向治理再上 mesh。
- 小团队:托管控制面 + 托管数据库,不要把精力花在 etcd 运维上。
3.7 替代方案对比
| 方案 | 优势 | 代价 | 适用 |
|---|---|---|---|
| Kubernetes | 生态最大、可移植、扩展强 | 复杂度高、平台团队成本 | 多服务、多云 |
| ECS / Cloud Run | 托管、运维少 | 锁定云厂商、扩展受限 | 单云、小团队 |
3.8 何时不该用
- 只有一两个容器:单机 Compose 或托管容器服务更便宜。
- 团队没有平台能力:K8s 的故障面会超过收益。
- 需要强隔离多租户:共享集群的 namespace 不是强安全边界。
- 有状态且强一致:优先托管数据库,不要自己写 operator。
4 边界
4.1 典型故障
| 症状 | 根因 | 处理 |
|---|---|---|
| CrashLoopBackOff | 启动即退出、配置错误、依赖不可达 | 看 logs --previous、退出码、环境变量 |
| ImagePullBackOff | 镜像名/凭证/网络/架构错误 | 检查 image、imagePullSecret、节点网络 |
| Pending | 资源不足、污点、亲和性、PVC 未绑定 | 看 describe 的 Events 与 requests |
| OOMKilled | limit 太小或内存泄漏 | 调 limit、查堆、看 cgroup 指标 |
| Readiness 一直失败 | 探针路径/端口/启动时间不对 | 调 probe 与 startupProbe |
| Service 无 endpoints | selector 不匹配、Pod 未 Ready | 查 get endpoints 与标签 |
4.2 反模式
| 做法 | 后果 | 替代 |
|---|---|---|
用 latest 镜像 | 版本漂移、回滚不可复现 | digest + 明确 tag |
| 不设 requests/limits | 调度失真、节点被压垮 | 设 requests,limits 按实测 |
| liveness 探依赖 | 下游抖动导致全量重启 | readiness 探依赖,liveness 只探自身 |
4.3 可观测信号
kube_pod_status_phase/kube_deployment_status_replicas:期望与实际副本。container_restart_count/OOMKilled:崩溃与内存压力。kube_pod_container_status_ready:readiness 通过率。HPA current/desired replicas:弹性是否生效。
4.4 安全 / 性能 / 一致性边界
- 安全:namespace 不是强隔离;RBAC、NetworkPolicy、PodSecurity 要一起用。
- 性能:requests 决定调度,limits 决定 cgroup;CPU throttling 会直接抬高 P99。
- 一致性:etcd 是集群事实来源;控制面不可用时不能变更,但已有 Pod 继续运行。
- 状态:Pod 随时可能被重建;本地盘与内存状态不适合做持久化。