我与Dubbo的二三事
我是2016年毕业的,在我毕业之前,我在学校里面学到的框架都是SSH,即struts+spring+hibernate,是的你没有看错,在大学里面的课本里面学的是strusts,这个还没毕业就被基本抛弃的框架。然而我大四出去实习,用的技术是SSM,即Spring,SpringMVC,Mybatis。实习的时候做的项目都是外包项目,非常传统的单体大项目,和学校里面做课程设计一样,所有的功能包括前后端都糅合在一个项目里面,根本不知道什么是分布式架构,不夸张的说,那个时候我对分布式这一块的知识无限趋近于零。
第一次接触到分布式的概念是我正式参加工作后,第一家公司属于一家互联网公司,做第三方支付。我甚至现在还记得加入这个公司之后,第一次在同事的帮助下,分别把支付服务和账务服务的Demo,两个项目,在两个IDEA中运行起来,然后我在账务服务打了一个断点,运行支付服务的测试用例,最后程序在账务服务的断点处停了下来!程序停下来的时候,我仿佛感觉看到了"神迹",颠覆了我前4年的大学学习中的固有印象!那个时候,我才知道了还有分布式这么一回事,才第一次接触到Dubbo,那个时候,程序猿的大门才向我徐徐打开,那个时候,我才知道,我一直在新手村待了4年。
Dubbo的坎坷一生
你的一生中总是会碰到几个十分神秘的人,他们看起来或者仙风道骨,或者平平无奇,他们总是问你一些终极的问题,总是会引起你的思考,你也会无情的拒绝,因为你知道,这事,不靠谱,这些人就是“算命先生”,总是问你:"你从哪里来?你往哪里去?你60岁的时候会有一道坎,了解一下?"
我不知道我的前世,也无法预知自己今生还没发生的坎,但是我知道Dubbo从哪里来,往哪里去,了解一下?
出生豪门:
半路夭折:
同行续命:
起死回生:
回归正统:
走向巅峰:
从Dubbo的历程可以看出,Dubbo的一生是坎坷的一生,虽然半路夭折,但是最后还是走向了巅峰。不知道为什么,这个时候我想起了马云爸爸说的一句话:
阿里说:我对Dubbo没有兴趣。因为我最快乐的时候,是当当网,帮我续命的时候!
很有马云爸爸的气质,一脉相承,厉害厉害!
Dubbo的异步化改造
Dubbo2.7新特性包括但不限于如下几点:
本文主要分享Dubbo2.7新特征之一,异步化改造相关的内容。
Dubbo的四种调用方式:
此图是本文的核心,本文分享的内容基本上都是对于此图深入到源码解级别的解析:
1.oneway --- 有去无回
oneway 指的是客户端发送消息后,不需要接受响应。对于那些不关心服务端响应的请求,比较适合使用 oneway 通信。但是请注意,返回值定义为void的并不是oneway的调用方式,void表示的程序上不需要关心返回值,但是对Dubbo框架而言,还是需要构建返回数据的。
仔细看oneway调用方式的图,可以看出:从客户端到服务端,只有req,没有resp;所以客户端不需要阻塞等待。
2.sync --- 同步调用
sync是最常用的通信方式,也是Dubbo默认的通信方法。
还是仔细看sync调用方式的图,再想一想你自己写的Dubbo应用,或者公司其他的Dubbo应用,是不是就是你们现在正在使用的通信方式。客服端发起req请求到A服务端,然后在设置的超时时间内,一直等待A服务器的响应resp,这个时候,我们说客户端处于阻塞的状态。当A服务器返回resp后,客户端才会继续运行。
3.future和callback --- 异步调用
future 和 callback 都属于异步调用的范畴,我们放在一起讨论。
继续仔细看future和callback调用方式的图,可以看出他们的区别是:在接收响应时,future.get() 会导致线程的阻塞;callback 通常会设置一个回调线程,当接收到服务端响应时,自动执行,不会对当前线程造成阻塞。
源码之下无秘密
1.Dubbo 2.6.0中体现调用方式的关键代码
有了前面的四种调用方式的简单介绍铺垫。我们深入到源码中一探究竟:
Dubbo2.6.0 --- DubboInvoke.doInvoke()方法
上图是Dubbo2.6.0版本DubboInvoke.doInvoke()方法的截图,先看个全局的代码。
其中的箭头解释一下:
对于红框中的代码,放大如下:
Dubbo2.6.0 --- DubboInvoke.doInvoke()方法关键代码
接下来对关键代码进行解读:
Dubbo2.6.0 --- DubboInvoke.doInvoke()方法关键代码解读
1.首先,Dubbo是怎么判断调用方式是前面说的4种调用方式(对于Dubbo2.6.x来说,其实是3种,2.7.0之后才支持了callback的调用方式)的哪一种的呢?
可以看到这两行代码:
可以对着关键代码解读的图来看,这两行代码的用途,就是判断你的配置文件(注解的方式或者dubbo.xml)中有没有配置async=true或者return=true。
2.接下来我们重点看一下我说的“最骚”的这一行代码:
"骚"在哪里?
是的,当是异步调用的时候,Dubbo把future放到RpcContext的上下文中,然后构造一个空的RpcResult给调用方,调用方再从上下文中把future取出来,需要用返回的值的时候调用一下future.get()方法。完成异步调用的操作。
同步调用的时候,dubbo也有拿到了这个future,但是并没有返回,而是直接调用了future.get()方法,这就是同步调用。
综上:我认为同步调用和异步调用的区别就是谁去调用future.get()方法。如果是Dubbo调用则是同步调用,如果是客户端调用者是异步方法。
2.Dubbo 2.7.0中体现调用方式的关键代码
接下来,我们看一下Alibaba提供给Apache的初始版本,即2.7.0版本中体现调用方式的关键代码。
Dubbo2.7.0 --- DubboInvoke.doInvoke()方法关键代码
朋友们可以先看左上角,确实是Dubbo2.7.0版本的代码。然后红框中圈起来的代码,看起来和Dubbo2.6.0版本中的差不多,那我们就对比着看。
Dubbo2.6.0与Dubbo2.7.0 DubboInvoke.doInvoke()关键代码对比
看到这个地方的时候我曾经走了一点弯路,甚至走上了歧途,一度质疑Dubbo的这个地方的源码是有问题的,毕竟我们搞技术的,就是一个大胆假设,小心求证吧。所以我给Dubbo提了一个issue.如下:
这里就不讲我走上歧途的过程了,后面有机会再分享。连接在这里,大家可以去看看,会不会被固化思维给带偏了。Dubbo issus#4421
这里的两个回答,第一个解答了我的问题,我看了后恍然大悟,这题属于当局者迷旁观者清。
第二个回答,建议我看一下最新版本的代码,当时的最新版本的代码是2.7.3。所以我把2.7.3版本的代码拉了下来。
3.Dubbo 2.7.3中体现调用方式的关键代码
接下来,我们就看看2.7.3中体现调用方式的关键代码,请各位朋友坐稳扶好,这里变化较大,车速较快,非常优秀。
Dubbo 2.7.3中体现调用方式的关键代码
首先我们可以看到isOneway的判断还是我们熟悉的代码。但是这里只有一个if-else了。Dubbo调用有四种方式,if判断了isOneway,那么剩下的三种都在这个else里面啦。
看到这里,笔者冷静的思考了一下,剩下的三种调用方式,sync调用,future调用,callback调用。其中sync调用是默认的方式,没有在这个地方体现出来,那么直觉告诉我在某个地方一定有一个异步转同步的调用。于是乎,我发现了这样一个神奇的类:
AsyncToSyncInvoker方法调用
AsyncToSyncInvoker方法中的54行asyncResult.get(),其中asyncResult继承自Future,用源码说话:
Result继承了Future
接着我们说说AsyncToSyncInvoker方法中的53行,getInvokeMode().
getInvokeMode()是RpcInvocation里InvokeMode的get方法。而且2.6.0里面RpcInvocation是没有invokeMode这个成员变量的。是2.7.0版本后新加的。
剩下的三种调用方式在InvokeMode里面
至此,基本圆满了。感谢大神指引我看最新版本的代码。
然后在上一个对比图:
Dubbo2.6.0/2.7.0/2.7.3 DubboInvoke.doInvoke()关键代码对比
Show me the code
Dubbo 2.6.0的异步化实现:
1.dubbo.xml配置,加入async="true"
<dubbo:reference id="asyncService" interface="org.apache.dubbo.demo.api.AsyncService" async="true"/>
2.dubbo接口定义:
public interface AsyncService{
String sayHello(String name);
}
3.异步调用,从RpcContext上下文中取出future,然后调用这个最"骚"的future.get()方法。还记得之前说的嘛:同步调用和异步调用的区别就是谁去调用future.get()方法。这里是客户端调用,所以是异步调用。
AsyncService.sayHello("hello");
Future<String> fooFuture=RpcContext.getContext().getFuture();
fooFuture.get();
有几个弊端:
Dubbo 2.7.x的异步化实现:
无需相关配置中进行特殊配置,显示声明异步接口即可:
public interface AsyncService{
String sayHello(String name);
default CompletableFuture<String> sayHiAsync(String name){
return CompletableFuture.completedFuture(sayHello(name));
}
}
使用callback方式处理返回值
CompletableFuture<String> future = asyncService.sayHiAsync("hi");
future.whenComplete((retValue, exception) ->{
if (exception == null) {
System.out.println(retValue);
} else {
exception.printStackTrace();
}
});
那么为什么Dubbo2.7.0这样简单的几行代码就能实现异步化了呢?记住,源码之下无秘密:
完结撒花,谢谢大家!欢迎大家关注我的公众号。why技术