41｜容灾：如何实现跨地域、跨可用区的容灾和同步？
许文强
你好，我是文强。
近几年，多个知名互联网平台都出现过服务长时间不可用的情况，原因有机房断电、网络电缆中断等。对于我们业务侧来说，我们需要保证业务在任何情况都能正常运行，即服务自身拥有容灾能力是基本要求。
而消息队列作为基础组件，容灾是它的基本能力。所以这节课我们将会详细讲一下消息队列集群在发生异常时如何做好容灾，以及异常时如何保证数据不丢失。
容灾能力的理论基础
我们先来看一些容灾相关的基础理论知识点。
当系统发生这些异常时，服务能够自动切换并正常运行就是我们说的容灾。下面盘点几个常见的故障场景。
为了完成容灾，从技术上来看，容灾行为可以在集群内或者集群间完成。所以容灾可以分为集群内容灾和集群间容灾两种类型。接下来我们详细了解一下这两种类型。
集群内和集群间容灾
先来看下图，这是一个同时具备跨可用区和跨地域容灾特性的集群架构。
如上图所示，有主备两套集群。这两套集群分别部署在上海和广州，且这两套集群都是跨可用区部署的。所以当某个节点、某个机架、某个可用区发生故障时，可以通过主从切换来恢复服务。当某个地域故障时，也可以通过主备切换来恢复服务。
集群内容灾主要靠主从切换来达到容灾效果，集群间容灾主要靠主备集群切换达到容灾效果。从部署形态来看，这两种容灾方式，都可以是跨机架、跨可用区、跨地域部署的形式。
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
本文深入介绍了消息队列容灾方案的理论基础和实现细节，包括集群内和集群间容灾、RTO和RPO概念等。在集群内容灾方案中，通过合理部署Broker、控制副本分布和主从切换来实现容灾；而跨集群容灾方案则通过主备集群之间消息数据和集群元数据的复制来解决地域级别的故障。文章还介绍了两种复制方式和客户端连接集群的方式，以及主备切换时的两种接入方式的主要区别。此外，还详细介绍了Apache Kafka MirrorMaker的实现原理和消费位点同步的重要性。总的来说，本文内容详实，涵盖了消息队列容灾方案的关键技术和实现细节，对于了解消息队列容灾方案的读者具有很高的参考价值。
仅可试看部分内容，如需阅读全部内容，请付费购买文章所属专栏
《深入拆解消息队列 47 讲》，新⼈⾸单¥59
《深入拆解消息队列 47 讲》，新⼈⾸单¥59
立即购买
© 版权归极客邦科技所有，未经许可不得传播售卖。 页面已增加防盗追踪，如有侵权极客邦将依法追究其法律责任。
登录 后留言
精选留言
由作者筛选后的优质留言将会公开显示，欢迎踊跃留言。
收起评论
