开篇词 | 别老想着怎么用好RPC框架,你得多花时间琢磨原理
何小锋
讲述:张浩大小:5.81M时长:07:15
该思维导图由 AI 生成,仅供参考
你好,我是何小锋。欢迎你和我一起学习 RPC。
在专栏开始之前,我先简单介绍下自己。我是 1998 年从北航毕业的,毕业以后我就一直在一线编程写代码。2011 年,我正式加入京东,刚好赶上了京东的快速发展期,一路做到了现在的技术架构部首席架构师。盘点下在京东的这 9 年时间,我参加过 17 次大促备战,和我的技术团队一起见证了京东的技术演进过程。我也曾带领团队攻克过很多技术领域难题,包括自主研发微服务框架、高性能消息中间件、智能监控以及容器平台等等。
近几年,我主攻分布式系统架构与设计,这也是我的专长所在。而在搭建分布式系统的过程中,我发现 RPC 总能充当较为关键的角色,它对整个分布式系统性能的提升起到了非常重要的作用。
我期待通过这个专栏,能把我这些年积攒的一些有关 RPC 的实战经验分享给你。
为什么要学习 RPC?
做任何事情都应该 Start with Why,那我们就先来说说为什么要学习 RPC。要回答这个问题,我们就得先考虑下 RPC 的实际应用场景。
说到 RPC,可能你的第一反应就是“微服务”。RPC 最大的特点就是可以让我们像调用本地一样发起远程调用,这一特点常常会让人感觉 RPC 就是为“微服务”或 SOA 而生的。现在的大多数应用系统发展到一定规模之后,都会向“微服务化”演进,演进后的大型应用系统也的确是由一个个“微服务”组成的。
我们可以说 RPC 是“微服务”的基础,这一点是毋庸置疑的。现在我们就可以反过来想这样一个问题——RPC 是不是只应用在“微服务”中呢?
当然不是,只要涉及到网络通信,我们就可能用到 RPC。一起看这样两个例子。
例 1:大型分布式应用系统可能会依赖消息队列、分布式缓存、分布式数据库以及统一配置中心等,应用程序与依赖的这些中间件之间都可以通过 RPC 进行通信。比如 etcd,它作为一个统一的配置服务,客户端就是通过 gRPC 框架与服务端进行通信的。
例 2:我们经常会谈到的容器编排引擎 Kubernetes,它本身就是分布式的,Kubernetes 的 kube-apiserver 与整个分布式集群中的每个组件间的通讯,都是通过 gRPC 框架进行的。
所以说,RPC 的应用场景还是非常广泛的。既然应用如此广泛,那它的核心价值又在哪里呢?
在我看来,RPC 是解决分布式系统通信问题的一大利器。
分布式系统中的网络通信一般都会采用四层的 TCP 协议或七层的 HTTP 协议,在我的了解中,前者占大多数,这主要得益于 TCP 协议的稳定性和高效性。网络通信说起来简单,但实际上是一个非常复杂的过程,这个过程主要包括:对端节点的查找、网络连接的建立、传输数据的编码解码以及网络连接的管理等等,每一项都很复杂。
你可以想象一下,在搭建一个复杂的分布式系统过程中,如果开发人员在编码时要对每个涉及到网络通信的逻辑都进行一系列的复杂编码,这将是件多么恐怖的事儿。所以说,网络通信是搭建分布式系统的一个大难题,是一点不为过的,我们必须给予足够的重视。
而 RPC 对网络通信的整个过程做了完整包装,在搭建分布式系统时,它会使网络通信逻辑的开发变得更加简单,同时也会让网络通信变得更加安全可靠。
现在你是不是感觉到学好 RPC 是很有必要的?
如何学习 RPC?
那我们应该怎么去学习 RPC 呢?
其实,深刻了解了为什么之后,怎么学这个问题并不难找到答案。就我自己的经验来看,我觉得可以用“逐步深入”这四个字来概括我的学习方式。
说起来也特别简单。当我们认识到,使用 RPC 就可以像调用本地一样发起远程调用,用它可以解决通信问题,这时候我们肯定要去学序列化、编解码以及网络传输这些内容。
把这些内容掌握后,你就会发现,原来这些只是 RPC 的基础,RPC 还有更吸引人的点,它真正强大的地方是它的治理功能,比如连接管理、健康检测、负载均衡、优雅启停机、异常重试、业务分组以及熔断限流等等。突然间,你会感觉自己走进了一个新世界,这些内容会成为你今后学习 RPC 的重点和难点。
这个逐步深入的过程,一定离不开真实的实践场景。学习知识,解决问题,遇到新问题,继续学习,不断解决问题,最后你会发现自己的学习曲线大概是这样的。
总结一下,学习 RPC 时,我们先要了解其基本原理以及关键的网络通信部分,不要一味依赖现成的框架;之后我们再学习 RPC 的重点和难点,了解 RPC 框架中的治理功能以及集群管理功能等;这个时候你已经很厉害了,但这还不是终点,我们要对 RPC 活学活用,学会提升 RPC 的性能以及它在分布式环境下如何定位问题等等。
整个专栏能让你学到什么?
上面提到的这些内容,就是我想通过这个专栏和你分享的。下面我来讲下本专栏的设计思路。
我把整个专栏的内容分为了三大部分,分别是基础篇、进阶篇和高级篇。
基础篇:重点讲解 RPC 的基础知识,包括 RPC 的基本原理以及它的基本功能模块,夯实基础之后,我们会以一场实战,通过剖析一款 RPC 框架来将知识点串联起来。
进阶篇:重点讲解 RPC 框架的架构设计,以及 RPC 框架集群、治理相关的知识。这部分我会列举很多我在运营 RPC 框架中遇到的实际问题,以及这些问题的解决方案。
高级篇:通过对上述两部分的学习,你已经对 RPC 有了较高层次的理解了。在这部分,我主要会从性能优化、线上问题排查以及一些比较有特色的功能设计上讲解 RPC 的应用。
整个专栏跟下来,虽然主要讲解的都是 RPC 相关的知识,但你会接触到很多的案例和解决方案,它们首先会使你对 RPC 的理解到达一个较高的层次;其次就是这些知识和解决方案会有相通性,只要你能举一反三,对你今后的工作就会有很大的帮助。
最后,我也很想听听你的想法。我们可以在留言区认识一下,期待你和我讲讲你的工作经历,你对 RPC 的认识,以及学习它的痛点、难点,我也好有针对性地为你讲解。现在,就让我们共同开启这段学习之旅吧!
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线
笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
这篇文章是由京东技术架构部首席架构师何小锋撰写的,他分享了自己在分布式系统架构与设计领域的实战经验。文章首先强调了学习RPC的重要性,指出RPC在分布式系统中扮演着关键角色,并且具有广泛的应用场景。作者提出了学习RPC的逐步深入方式,包括掌握基本原理和网络通信部分,以及学习RPC框架的治理功能和集群管理等。此外,作者还介绍了整个专栏的设计思路,分为基础篇、进阶篇和高级篇,涵盖了RPC的基础知识、架构设计、性能优化和线上问题排查等内容。通过这些内容,读者可以获得对RPC的深入理解,并且能够应用到实际工作中。文章内容丰富,涵盖了技术实战经验和学习方法,适合对分布式系统和RPC感兴趣的技术人员阅读学习。
2020-02-1793人觉得很赞给文章提建议
仅可试看部分内容,如需阅读全部内容,请付费购买文章所属专栏
《RPC 实战与核心原理》,新⼈⾸单¥59
《RPC 实战与核心原理》,新⼈⾸单¥59
立即购买
© 版权归极客邦科技所有,未经许可不得传播售卖。 页面已增加防盗追踪,如有侵权极客邦将依法追究其法律责任。
登录 后留言
全部留言(66)
- 最新
- 精选
- 业余草通俗解释,如果 HTTP 是普通话, 那么 RPC 就是方言。既然是方言,你就会看到各家都有自己的方言, 比如 google 的 gRPC, 百度的 bRPC, facebook 的 thrift,阿里的 dubbo... 而 HTTP 只有官方的一套标准
作者回复: 你好,业余草。rpc目前还没有行业标准,百家争鸣,有竞争才有动力。
2020-02-17683 - 钱真正的大佬,写的代码也见识过,可惜JSF源码不开源,反编译看过一点。 互联网三剑客:RPC、MQ、REDIS,不过底座是网络通信。 RPC的核心在于使进程间通信像进程内通信一样简单,更直白一点调用其他应用的方法好似调用本地方法一样简单方便。进程内之所以方便是因为写操作系统的人把复杂的事情给处理了,让业务研发专注于业务逻辑。进程间的调用简单是因为写RPC框架的人把复杂的工作给做了,使业务研发继续专注于业务逻辑。 进程间能通信是第一步,后面随着机器的增多事情就变得复杂了起来,所以,有了服务注册中心、有了服务治理平台、有了配置管理中心、有了容器平台、有了各个各有的监控平台、有了UMP/UCC/LOGBOOK/MDC/OPS/QONE/JONE/CAP等等一系列的东西。 不过问题的根源还是单机的性能及容量有上限导致的,否则也就没这么多的事情了。
作者回复: 对
2020-05-10278 - 逝光无痕RPC是通过四层TCP协议还是七层HTTP协议去完成呢,以前看有些文章说是只能是TCP协议去完成调用?对这有些疑惑,希望从这里得到答案!
作者回复: 大部分采用的tcp协议。grpc采用的http2
2020-02-18517 - 奕原来RPC最强大的是治理功能,之前只是用作网络通信
作者回复: 你好,一步。为了高可用,RPC需要治理
2020-02-1716 - 阿卧rpc的基础是序列化、编解码和网络传输;高级应用是健康检测、负载均衡、服务治理等。 学问太多了。老师掌握好rpc的应用和原理,算是什么级别的程序员啊?
作者回复: 公司里面的牛人
2020-02-2214 - 尔冬橙老师,netty和rpc框架间是什么关系呢
作者回复: netty可以作为rpc的网络传输层
2020-02-26211 - sun留白你好,何老师。可以说说rpc和restful的区别吗?
作者回复: 两个处理流程形似,rpc一般更喜欢tcp,用二进制协议,性能更好,常用的rpc框架功能比restful客户端更多。
2020-02-18411 - Walter_Mitty生涯进入瓶颈期,过来充充电
作者回复: 期望收获满满
2020-02-1910 - td901105老师,问一下,一般rpc的文章中都会有一张rpc调用的原理图,里面的client stub和server stub是实际存在的吗?还是一个虚拟概念?如果是实际存在的话能举一个具体的例子吗?比如像grpc中具体是怎么实现client stub和server stub的?
作者回复: stub是实际存在的,有些可能运行中生成一个代理类,grpc的stub是静态代理
2020-03-099 - 奔奔奔跑老师您好,有幸购买您的专栏,我有个疑问想请教一下,你说的在学习rpc的过程中解决实际问题,但是我好像没遇见过啥实际问题呀,框架一用,一跑,完事了。所以我的学习收益太低了,老师能给我讲讲吗?谢谢了
作者回复: 很多问题在框架里面解决了,了解背后的原理
2020-02-2739
收起评论