QiuRPC通用网络RPC框架
QiuRPC 参考手册
一个通用的网络RPC框架,它应该包括如下功能:
具有服务的分层设计,借鉴Future/Service/Filter概念
2.具有网络的分层设计,区分协议层、数据层、传输层、连接层
3.独立的可适配的codec层,可以灵活增加HTTP,Memcache,Redis,MySQL/JDBC,Thrift等协议的支持。
4.将多年各种远程调用High availability的经验融入在实现中,如负载均衡,failover,多副本策略,开关降级等。
5.通用的远程调用实现,采用async方式来减少业务服务的开销,并通过future分离远程调用与数据流程的关注。
6.具有状态查看及统计功能
7.当然,最终要的是,具备以下通用的远程容错处理能力,超时、重试、负载均衡、failover……
QiuRPC特点
QiuRPC是一个采用JAVA实现的小巧的RPC框架,一共3K多行代码,实现了RPC的基本功能,开发者也可以自定义扩展,可以供大家学习探讨或者在小项目中使用,目前QiuRPC具有如下特点:
-
服务端基于注解,启动时自动扫描所有RPC实现,基本零配置
2. 客户端实现Filter机制,可以自定义Filter
3. 基于netty的Reactor IO多路复用网络模型
4. 数据层提供protobuff和hessian的实现,可以扩展ISerializer接口自定义实现其他
5. 负载均衡算法采用最少活跃调用数算法,可以扩展ILoadBlance接口自定义实现其他
6. 客户端支持服务的同步或异步调用
系统待改进点
-
增加注册中心功能,在大项目中,一个项目可能依赖成百上千个服务,如果基于配置文件直接指定服务地址会增加维护成本,需要引入注册中心
2. 目前用的是反射和java代理实现的服务端存根和客户端代理,为了提高性能,可以把这些用javassit,asm等java字节码工具实现
3. 增加一些监控功能,为了增强服务的稳定性和服务的可控性,监控功能是不可或缺的
4. 目前应用协议采用的是最简单的协议,仅仅一个魔数+序列化的实体,这些需要增强,比如增加版本号以解决向前兼容性
5. 增加High availability的一些手段,目前只有负载均衡,其他的比如failover,多副本策略,开关降级等,过载保护等需要自己实现
示例:
1. 编写服务端接口 public interface IServer1 { public String getMsg(); public Message echoMsg(String msg); public Message echoMsg(int msg); } 2. 编写服务端实现类 @ServiceAnnotation(name="myserver1") public class MyServer1 implements IServer1{ private static final Log log=LogFactory.getLog(MyServer1.class); public String getMsg() { log.info("getMsg echo"); return "Hello"; } @Override public Message echoMsg(String msg) { Message result=new Message(); result.setMsg(msg); result.setData(new Date()); return result; } @Override public Message echoMsg(int msg) { Message result=new Message(); result.setMsg("int:"+msg); result.setData(new Date()); return result; } } 3. 启动服务 public static void main(String[] args) { RpcServerBootstrap bootstrap=new RpcServerBootstrap(); bootstrap.start(8080); } 4. 编写客户端调用代码 public class Client1 { public static void main(String[] args) { try { final IServer1 server1=RpcClientProxy.proxy(IServer1.class,"server1" , "myserver1"); long startMillis=System.currentTimeMillis(); for(int i=0;i<10000;i++) { final int f_i=i; send(server1,f_i); } long endMillis=System.currentTimeMillis(); System.out.println("spend time:"+(endMillis-startMillis)); } catch (Throwable e) { e.printStackTrace(); } } public static void send(IServer1 server1,int f_i) { Message msg = null; try { //由于客户端配置的async="true",我们用异步方式来获取结果,如果是同步方式,直接msg=server1.echoMsg(f_i)即可 server1.echoMsg(f_i); Future future = RpcContext.getContext().getFuture(); msg=future.get(); System.out.println("msg:"+msg.getMsg()+","+msg.getData()); } catch(Throwable e) { e.printStackTrace(); } } } 5. 编写客户端配置文件 <application maxThreadCount="100"> <service name="server1" connectStr="127.0.0.1:9090;127.0.0.1:8080" maxConnection="100" async="true"></service> </application>