DevOps

概述 用 Jenkins 的人分两派：一派在网页上填表单配任务，点几下就跑起来了，简单粗暴；另一派在代码仓库里写 Jenkinsfile，把构建流程变成代码，版本控制、评审、回滚一条龙。 前者叫 Freestyle Project（自由风格项目），后者叫 Pipeline Project（流水线项目）。 这两种风格不是"谁取代谁"的关系。很多团队两个都在用——简单的脚本任务用 Freestyle，复杂的多阶段发布用 Pipeline。但如果你刚开始搞 CI/CD，或者在犹豫要不要从 Freestyle 迁到 Pipeline，这篇文章帮你把两种风格的配置流程、核心差异、选型策略一次性捋清楚。 我先说结论：能用 Pipeline 就用 Pipeline。但别急着全盘迁移，得看场景。下面从零开始配。 Jenkins 项目到底是个什么东西 Jenkins 本身是个任务执行引擎。你给它一组指令——去哪拉代码、怎么编译、往哪部署——它照着干。这组指令的载体就是 Jenkins 项目（Jenkins 内部叫 Job）。 打个比方，Jenkins 是厨师，项目就是菜谱。菜谱写了先切菜、再炒、最后装盘，厨师按步骤做。Freestyle 和 Pipeline 就是两种不同格式的菜谱——一个是填表式，一个是代码式。 Jenkins 原生支持好几种项目类型，实际干活最常用的就两种： 项目类型 怎么配 适合谁 Freestyle Project 在网页上填表单 刚接触 Jenkins 的团队，简单构建场景 Pipeline Project 写 Jenkinsfile 代码 需要多阶段编排、长期维护的团队 还有 Maven 项目（Java Maven 专用的 Freestyle 特化版）和多配置项目（同一任务跑多套参数），用得越来越少，这里不展开。 两种风格的本质区别 先看一个直观的例子。假设要配一个"拉代码 → 编译 → 部署"的任务。 Freestyle 版本：打开 Jenkins 网页，在源码管理填 Git 地址，构建步骤填 mvn clean package，构建后操作填部署脚本。保存，点构建，跑起来了。...

概述 在现代软件工程中，SRE（站点可靠性工程）与开发团队的关系是最关键也最微妙的一环。开发追求的是"快速交付新功能"，SRE 追求的是"系统稳定运行"——这两个目标天然存在张力。如果协作模式设计不当，轻则效率低下、互相甩锅，重则线上事故频发、团队信任崩塌。 Google SRE Book 中有一句经典的话：“SRE 的核心矛盾在于，我们需要同时让开发团队快速前进，同时保持系统的可靠性。“这句话至今仍然精准。问题的本质不在于"要不要协作”——答案是显然的——而在于如何协作，采用什么样的组织模型、流程机制和工具支撑，才能让两个目标不冲突甚至互相促进。 将逐步梳理 SRE 与开发团队协作的常见模式、冲突根源、工程化解决方案，以及平台工程（Platform Engineering）等新趋势下的演进方向。内容基于 Google SRE Book、Team Topologies 等权威理论，结合一线生产实践经验。 冲突的根源：为什么 SRE 和开发天然存在张力 激励机制的不一致 SRE 与开发团队冲突的最深层原因，是两者激励机制的天然错位： 维度 开发团队 SRE 团队 核心目标 功能交付速度 系统稳定性 成功标准 发布频率、故事点完成率 SLA 达成率、事故数量 风险偏好 愿意承担一定风险快速上线 倾向于保守，降低变更风险 关注时间窗 短期（当前迭代/季度） 长期（系统全生命周期） 对变更的态度 变更是价值的来源 变更是故障的来源 这种错位不是"谁对谁错"的问题，而是组织分工带来的结构性矛盾。Google 最早提出的 SRE 模型，其实就是试图用工程化手段来协调这种矛盾。 常见的协作失败模式 在实际工作中，以下几种失败模式反复出现： 模式一：SRE 沦为"运维打杂” 开发把代码扔过墙，SRE 负责部署、监控、值班和擦屁股。SRE 没有时间和精力做工程改进，变成了高级运维。这是最常见的退化模式。 模式二：SRE 成为"发布守门人" SRE 拥有生产环境准入权，但缺乏工程能力帮助开发提升质量，只能靠"卡发布"来降低风险。结果是开发把 SRE 视为障碍，SRE 把开发视为不靠谱，信任持续恶化。 模式三：责任模糊的"共同所有权" 所有人对系统可靠性"共同负责"，结果没有人真正负责。事故发生时互相推诿，改进时无人牵头。 模式四：SRE 与开发完全隔离 SRE 团队自成体系，与开发几乎没有日常交流。SRE 对业务上下文缺乏理解，做出的架构决策脱离实际；开发对 SRE 的工作不了解，无法有效配合。...

变更管理在 SRE 中的定位 Google SRE 总结的一条铁律：大约 70% 的线上故障由变更直接引发。无论是代码部署、配置修改、基础设施调整还是依赖升级，每一次变更都在向系统注入不确定性。因此，变更管理不是流程上的繁文缛节，而是 SRE 可靠性工程的第一道防线。 变更管理的核心目标可以归纳为三点： 降低爆炸半径——变更出了问题，影响面应尽可能小。 缩短发现问题的时间——变更后若出现异常，必须能在分钟级甚至秒级感知。 具备快速回滚能力——发现问题后，能在最短时间内恢复到上一个已知正常状态。 实现这三个目标的关键技术手段就是灰度发布与快速回滚。下面逐一展开。 金丝雀发布原理与实现 核心思想 “金丝雀"一词源自矿工带金丝雀下井探测有毒气体的做法。在软件发布中，金丝雀发布指的是：先将新版本部署到极小比例的实例上，引入少量真实流量进行验证，确认无异常后再逐步扩大流量比例，直至全量切换。 与全量发布相比，金丝雀发布的本质区别在于引入了流量比例控制和指标门控两个机制，使发布过程变成一个可控的、可观测的渐进过程。 流量比例控制 典型的金丝雀发布流量推进序列： 5% → 10% → 25% → 50% → 100% 每个阶段之间设置观察窗口（如 5-10 分钟），期间持续采集关键指标。只有当指标满足预设的健康标准时，才推进到下一阶段；否则自动暂停甚至回滚。 指标门控 指标门控是金丝雀发布的"大脑”。通常关注以下几类指标： 指标类别 示例 门控逻辑 错误率 HTTP 5xx 比例 金丝雀错误率 > 基线 1.5x → 自动回滚 延迟 P99 / P95 响应时间 金丝雀 P99 > 基线 + 50ms → 暂停推进 业务指标 下单成功率、支付成功率 成功率下降 > 2% → 自动回滚 资源指标 CPU、内存、连接数 资源使用率异常飙升 → 告警暂停 关键原则：门控指标必须从用户视角出发，而非仅看基础设施指标。一个 CPU 正常但 P99 翻倍的系统，仍然应该触发回滚。...

概述 Pipeline as Code 是 Jenkins 从"拖拽式配置"走向"代码化"的分水岭。把流水线定义写在 Jenkinsfile 中，纳入 Git 版本控制，意味着每次流水线变更都有 diff 可审查、有历史可追溯、有分支可回滚。从 Jenkinsfile 语法到生产级流水线设计，详细梳理 Pipeline as Code 的核心实践。 参考来源：Jenkins Pipeline 官方文档 一、Jenkinsfile 语法 1.1 声明式 vs 脚本式 Jenkins Pipeline 有两种语法风格： 维度 声明式（Declarative） 脚本式（Scripted） 语法 结构化 DSL Groovy 代码 可读性 高，接近配置文件 低，需要 Groovy 知识 灵活性 受限于 DSL 约束 完全自由 输入验证 内置 post、when 等结构 需手动实现 推荐场景 标准流水线、团队协作 复杂逻辑、条件分支多 // === 声明式 Pipeline === pipeline { agent any stages { stage('Build') { steps { sh 'make build' } } } } // === 脚本式 Pipeline === node { stage('Build') { sh 'make build' } } 实践建议：优先用声明式，仅在声明式无法表达的复杂逻辑处用 script {} 块嵌入脚本式代码。...

概述 代码质量问题越早发现，修复成本越低。在提交阶段拦截比在 CI 阶段拦截快，在 CI 阶段拦截比在生产环境出问题后修复快。Git Hooks 提供了在提交和推送的关键节点自动执行检查的能力——格式化代码、运行 lint、验证提交信息、执行测试。从 Git Hooks 原理到工具链实践，构建一套从本地到 CI 的代码质量自动化体系。 参考来源：Git Hooks 官方文档、pre-commit 官网 一、Git Hooks 体系 1.1 Hooks 概览 Git Hooks 是 Git 在特定操作（如 commit、push、merge）发生时自动执行的脚本，存放在 .git/hooks/ 目录中： Hook 名称 触发时机 常见用途 是否可跳过 pre-commit commit 执行前 代码格式化、lint 检查 --no-verify prepare-commit-msg 编辑提交信息前 自动生成提交信息模板 - commit-msg 提交信息写入后 验证提交信息格式 --no-verify post-commit commit 完成后 通知、统计 否 pre-push push 执行前 运行测试、防止推送到 protected 分支 --no-verify pre-merge-commit merge 完成前 合并前检查 - post-merge merge 完成后 恢复依赖、更新子模块 否 pre-rebase rebase 执行前 防止 rebase 已推送的提交 - post-checkout 切换分支后 恢复环境 否 1....

手动登录云控制台创建服务器、数据库、网络——这种方式在资源少时还能勉强应付，一旦环境变复杂，就会出现"改不动、删不清、说不明"的困境。基础设施即代码（Infrastructure as Code, IaC）用代码描述基础设施，让资源的创建、修改和销毁变得可版本化、可审查、可复用。Terraform 是目前最主流的 IaC 工具，从理念到实战全面梳理。 参考来源：Terraform 官方文档 一、IaC 理念：声明式 vs 命令式 IaC 的核心思想是：用代码文件描述基础设施的期望状态，由工具自动驱动实际状态向期望状态收敛。 在 IaC 领域，存在两种截然不同的范式： 维度 声明式（Declarative） 命令式（Imperative） 核心理念 描述"要什么"（期望状态） 描述"怎么做"（操作步骤） 代表工具 Terraform、CloudFormation、Pulumi Ansible（部分）、Shell 脚本、AWS CLI 幂等性 天然幂等，重复执行结果一致 需自行保证幂等性 状态感知 工具追踪当前状态，自动计算差异 无状态感知，按步骤执行 可读性 接近配置文件，易于理解 接近编程逻辑，灵活但复杂 Terraform 采用声明式范式。你只需声明"我需要 3 台 EC2、1 个 RDS、1 个 VPC"，Terraform 会自动对比当前状态和期望状态的差异，生成并执行变更计划。 声明式的核心优势：幂等性。无论执行多少次 terraform apply，最终状态一致。这意味着你可以把基础设施代码纳入 Git 版本控制，通过 PR 审查变更，实现基础设施的"代码化治理"。 二、Terraform 核心概念 Terraform 的运作围绕四个核心概念展开： 开发者编写 .tf 文件 │ ▼ ┌──────────────┐ ┌──────────────┐ ┌──────────────┐ │ Provider │ ←──→ │ Resource │ │ State │ │ 云厂商插件 │ │ 资源声明 │ │ 状态文件 │ └──────────────┘ └──────────────┘ └──────────────┘ │ ▼ ┌──────────────┐ │ Module │ │ 模块化复用 │ └──────────────┘ 2....

概述 Ansible 的上手门槛很低——一个 YAML 文件、几行 yum install 就能跑通。但当你面对几百台服务器、多套环境、复杂的依赖关系和严格的变更审计要求时，“能跑"和"能上线"之间隔着一整个工程体系。本文把生产级 Playbook 的核心实践浓缩成一份可操作的指南，涵盖从结构组织到性能优化的全链路。 参考来源：Ansible 官方好的实践 一、Playbook 结构优化 1.1 目录布局 生产级 Ansible 项目应该遵循标准目录结构。这不是 Ansible 的强制要求，而是大量团队踩坑后形成的共识： production-project/ ├── ansible.cfg # 项目级配置 ├── inventory/ │ ├── production/ │ │ ├── hosts.ini # 生产环境主机清单 │ │ └── group_vars/ │ │ ├── all.yml # 所有环境共享变量 │ │ ├── web.yml # web 组专用变量 │ │ └── db.yml # db 组专用变量 │ └── staging/ │ ├── hosts.ini │ └── group_vars/ │ └── all....

概述 很多人对 Makefile 的印象停留在 C/C++ 编译辅助工具。但 Make 本质上是一个依赖关系驱动的任务执行引擎——你告诉它"目标是什么、依赖什么、怎么生成"，它负责按正确顺序执行并跳过无需重复的步骤。这种模型在运维场景中同样强大：部署依赖构建、清理依赖停止服务、检查依赖配置就绪。从语法基础到运维实战，把 Makefile 的能力完整展开。 参考来源：GNU Make 手册 一、Makefile 语法基础 1.1 基本结构 # 目标: 依赖 # 命令（必须用 Tab 缩进，不能用空格） target: dependencies command1 command2 一个实际例子： # Makefile - 基础示例 hello: main.c utils.c gcc -o hello main.c utils.c -Wall clean: rm -f hello *.o .PHONY: clean 关键规则：命令行必须以 Tab 开头，不是空格。这是 Makefile 最常见的初学者错误。 1.2 执行机制 Make 的工作流程分三步： 解析：读取 Makefile，构建依赖关系图 比较：检查每个目标的修改时间，判断是否需要重新生成 执行：按拓扑排序执行过时目标的命令 目标文件不存在 → 执行命令生成 目标文件存在，但依赖更新 → 重新执行 目标文件存在，依赖未变 → 跳过（这就是增量构建的核心） # 执行第一个目标 make # 执行指定目标 make clean # 指定 Makefile 文件 make -f MyMakefile build # 并行执行（利用多核） make -j4 # 只打印命令不执行 make -n # 强制重新生成 make -B # 输出详细执行过程 make V=1 二、变量与函数 2....

概述 kubectl 是 Kubernetes 管理员最常用的工具，但大多数人只用了它 20% 的功能。每天敲几十遍 kubectl get pods -n production，却不知道一行别名就能省掉一半字符；遇到问题只知道 kubectl describe 和 kubectl logs，却不知道 krew 插件能一键排查网络、资源、证书问题。本文逐步梳理 kubectl 的生产力提升工具链，从别名到插件到交互式工具，让你的 K8s 日常操作效率翻倍。 参考来源：kubectl 官方文档、krew 官网 一、kubectl 别名配置 1.1 基础别名 # ~/.bashrc 或 ~/.zshrc # 基础缩写 alias k='kubectl' alias kg='kubectl get' alias kd='kubectl describe' alias kdel='kubectl delete' alias ke='kubectl exec' alias kl='kubectl logs' alias kf='kubectl apply -f' alias kdf='kubectl delete -f' alias kr='kubectl run' # 常用资源缩写 alias kgp='kubectl get pods' alias kgs='kubectl get svc' alias kgn='kubectl get nodes' alias kgd='kubectl get deployments' alias kgsec='kubectl get secrets' alias kgcm='kubectl get configmaps' alias kging='kubectl get ingress' alias kgns='kubectl get namespaces' alias kgpv='kubectl get pv' alias kgpvc='kubectl get pvc' alias kdsa='kubectl describe sa' # 宽输出 + 自定义列 alias kgpw='kubectl get pods -o wide' alias kgsw='kubectl get svc -o wide' alias kgnw='kubectl get nodes -o wide' # watch 模式 alias kgpw='watch -n 2 kubectl get pods -o wide' alias kgnw='watch -n 5 kubectl get nodes -o wide' # 所有命名空间 alias kgpa='kubectl get pods --all-namespaces' alias kgsa='kubectl get svc --all-namespaces' # YAML 输出 alias kgpy='kubectl get pods -o yaml' alias kgsy='kubectl get svc -o yaml' 1....

CI/CD 是现代软件交付的命脉。手动构建、手动部署不仅效率低下，更是事故的温床——“在我机器上能跑"的悲剧几乎都源于缺乏自动化流水线。GitHub Actions 作为 GitHub 原生的 CI/CD 平台，与代码仓库无缝集成，免费额度对开源项目友好，已成为最流行的 CI/CD 工具之一。从核心概念出发，结合 Go 项目和 Hugo 站点两个实战场景，完整讲解流水线设计。 参考来源：GitHub Actions 官方文档 一、GitHub Actions 核心概念 GitHub Actions 的架构围绕五个概念展开，理解它们的关系是设计流水线的基础： Workflow（工作流） │ ├── Job A（任务） │ ├── Step 1 → Action: checkout 代码 │ ├── Step 2 → Action: setup Go 环境 │ └── Step 3 → Shell: go test ./... │ └── Job B（任务） ├── Step 1 → Action: 下载构建产物 └── Step 2 → Shell: 部署到服务器 概念 说明 类比 Workflow 一个 ....