Chaos Mesh让应用与混沌在 Kubernetes 上共舞-杨可奥

**总结：** **一、混沌工程的动机** 混沌工程旨在通过主动引入故障来测试系统的稳定性和容错能力，帮助发现潜在问题，提升系统可靠性。 **二、Kubernetes 上的混沌工程方案 —— Chaos Mesh** Chaos Mesh 是一个专为 Kubernetes 设计的混沌工程工具，具有以下特点： 1. 在 Kubernetes 上运行，测试对象为 Pod 或 Container。 2. 使用 Helm 一键部署，操作简便。 3. 面临的技术挑战包括隔离性、Go 线程模型与 namespace 的融合、运行时注入与恢复，以及与内核交互的复杂性。 **三、Chaos Mesh 的结构，以 NetworkChaos 为例** Chaos Mesh 的核心结构通过 NetworkChaos 展示了其实现机制，具体细节未展开，但强调了其在 Kubernetes 环境中的高效性和灵活性。 **四、Chaos Mesh 使用案例** 以 TiDB 为例，Chaos Mesh 通过模拟节点故障（Pod Failure）测试系统的容错能力，发现了一个导致 QPS 无法恢复的 Bug。 使用方案包括： 1. 在生产环境中使用，需限制爆炸半径。 2. 在测试环境和 CI 中使用，支持预先定义的 Github Actions 和 Kubernetes Client 创建实验。 **核心观点：** Chaos Mesh 是一个强大的 Kubernetes 混沌工程工具，能够有效帮助开发者发现和修复系统潜在问题，提升系统稳定性。其设计兼顾了易用性和安全性，适用于生产、测试和 CI 等多种场景。