Auto proxy & Auto scan HTTP RPC library

周末在家,闲来无事,就想写一个服务器端自动扫描并注册,客户端自动扫描并代理的 RPC 组件,基于 Spring;
整理了一下思路,这个组件分三个部分:coreserverclient;如下:

http-rpc

分三个步骤完成:

  • core:服务定义,数据序列化方式;
  • server:服务类自动扫描并注册、服务暴露;
  • client:客户端接口自动扫描并代理;

第一步 core

  • 服务定义:一个服务狭义地理解为一个函数,这里面就包含函数的入参数和出参;另外一个层面的问题,怎么样定位服务呢?站在 Java 角度,我使用ServiceNamespaceServiceMapping两个注解,ServiceNamespace是一些同类服务的命名空间,ServiceMapping是具体服务入口;默认有一个 value 值,即为命名空间的名字和服务的名字;
  • 数据序列化方式:我这里选择了 ProtoStuff

下面贴出相关代码:

package io.http.rpc.core.annotation;

import java.lang.annotation.*;

@Target(ElementType.TYPE)
@Retention(RetentionPolicy.RUNTIME)
@Documented
public @interface ServiceNamespace {

    /**
     *
     * namespace of service
     *
     */
    String value() default "";

}
package io.http.rpc.core.annotation;

import java.lang.annotation.*;

@Target(ElementType.METHOD)
@Retention(RetentionPolicy.RUNTIME)
@Documented
public @interface ServiceMapping {

    /**
     *
     * name of service
     *
     */
    String value() default "";

}
package io.http.rpc.core;

public interface CoreServiceInvoker {

    /**
     * core service.
     * @param namespace 命名空间
     * @param name 服务名
     * @param parameters 参数列表
     *
     * */
    Object invoke(String namespace, String name, Object[] parameters);

}
package io.http.rpc.core.serialize;

import io.protostuff.LinkedBuffer;
import io.protostuff.ProtobufIOUtil;
import io.protostuff.Schema;
import io.protostuff.runtime.RuntimeSchema;

/**
 * Created by manbu on 7/2/16.
 */
public final class ProtoSerializeUtils {

    @SuppressWarnings("unchecked")
    public static <T> byte[] encode(T object) {

        Schema<T> schema = RuntimeSchema.getSchema((Class<T>) object.getClass());

        LinkedBuffer buffer = LinkedBuffer.allocate(512);

        return ProtobufIOUtil.toByteArray(object, schema,  buffer);
    }

    @SuppressWarnings("unchecked")
    public static <T> T decode(byte[] data, Class<T> clazz) {

        Schema<T> schema = RuntimeSchema.getSchema(clazz);

        T m = schema.newMessage();

        ProtobufIOUtil.mergeFrom(data, m, schema);

        return m;
    }

}

第二步 server

  • 自动扫描:

通过io.http.rpc.server.auto.ServiceScannerConfigurer的配置basePackage,扫描逻辑借鉴 mybatis 的 Mapper 扫描机制,扩展org.springframework.context.annotation.ClassPathBeanDefinitionScanner

代码:

io.http.rpc.server.auto.ClassPathServiceScanner 
  • 服务注册:

『服务注册中心』即是一个 Service Holder,当扫描到ServiceNamespace即注册到『服务注册中心』中;

代码:

io.http.rpc.server.ServiceRegistrationCenter
  • 服务暴露:
    通过实现org.springframework.web.HttpRequestHandler来暴露服务,并在接收到请求后反序列化再从服务注册中心找到服务并执行;

代码:

io.http.rpc.server.HttpServiceExporter

第三步 client

  • 自动扫描并代理

通过io.http.rpc.client.auto.ServiceScannerConfigurer的配置basePackage,扫描逻辑借鉴 mybatis 的 Mapper 扫描机制,扩展org.springframework.context.annotation.ClassPathBeanDefinitionScanner;扫描得到一个服务接口后,即通过改变 Spring Bean 的定义,使用ServiceFactoryBean生产出一个代理类;代理逻辑将请求交给核心层的 ProxyExecutor;

代码:

io.http.rpc.client.auto.ClassPathServiceScanner
io.http.rpc.client.auto.ServiceScannerConfigurer
io.http.rpc.client.auto.ServiceFactoryBean
  • ClientBuilder

这里简单实现一个 ClientBuilder;仿照netty-rpc,后续再进行完善;

https://github.com/manbusky/http-rpc

Read more

无题

看着川川熟睡的样子,看着他俩在我面前嬉闹的跑过,我总感觉特别恍惚; 不知如何和他们相处,甚至也不知如何与不知如何是好的自己相处; 于是我只好查查知乎学样子,学着做好一个为人父的样子; 在心情舒畅的时候,我放任他们自己翻箱倒柜、在地上躺水打滚、接住他们发出的各种听不懂的咿咿呀呀,想的是让他们洒脱自由地探索这个世界,给予最积极的回应;心情烦躁到收不住火的时候,也免不了大吼几声,事后愧疚不已,接应他们的目光时也有些闪躲; 如何陪伴他们让他们能够适应这个不完美的世界?如何让自己撇去浮躁能够自如的处理这一切? 我想:生命本来就是荒凉的,生活本来就是凛冽的; 人生很长,余生漫漫; 令人心烦的工作……日渐老去的父母……还有各种空洞又悠长的忧伤…… 我想我终究对他俩还是有期待的,期待他们有明媚的性格,健硕的人格,充盈的内心,潇洒的生活; 人生很短,倏然过半; 每一天都是旧的,每一天又都是新的; 以为没什么可怀念的过去,过去却时常冒出来……总想着的未来,未来却已到来;这个世界本没有完美的事,不如意总是常态; 希望我们都够心存温柔、感念过往、一起寻找美好;

By Jiacheng Wang

无题

萦绕在我记忆里的老家两层楼房,总是二层左侧还没有盖起来的样子。经过危险的没有扶手的楼梯才能上二层。 不知为何:在我无数次的梦里,楼梯和二层玉制板总是摇晃不止,我虽胆战心惊却仍旧不知疲倦的跑上跑下。 小时候的美味在我的味蕾深处,从未遗忘。 夏天里的丝瓜、长豆角、苦苦的小萝卜菜……母亲做坏了长虫子的豆豉酱、到年中还有的腊鱼、腊肉;雪白雪白的猪油炒饭;豆糕、糍粑、薯片; 尤其记得薯片的做法:把红薯去皮洗干净和糯米一起蒸熟,加入橘子皮,揣成泥状,均匀摊薄然后糊在被子面上晒干,再从被子面上撕下来,成一层半透明的硬胶状的干薯皮,用剪刀剪成菱形、平行四边形的形状储存起来。吃的时候就用热沙炒熟成砖红色,吃起来夹着淡淡的橘皮香味,淡甜香脆; 5毛钱两块的麻酥、一升米加一包糖精炸出来的乐口笑……都是晚上不吃完不睡觉零嘴; 小时候村里有人家盖房子,会有大货车来送砖,我总是和村里小伙伴一起给人家搬砖,搬一车砖换取几毛钱的劳动成果;带着一身脏兮兮的衣服回家,总免不了母亲几声轻柔的责备; 但记忆里母亲从来没有责骂过我,即便教育我的时候,也只提是反面教材的别人家的孩子,于是我就知道像那样就不对; 老家里

By Jiacheng Wang

无题

小时候的记忆现在已经模糊了,即便有一些清晰的我想应该也仅是自己在某一些记忆碎片上『添油加醋』拼凑而成的; 我的父亲在家排行第三,前面是两个哥哥,我的大伯和二伯;家里穷只有一幢土砖房,到父亲娶我母亲的时候,只能和大伯一家共用那幢老房子;我家在房子左侧,大伯家在房子右侧,共用一个大门进入;整幢房子有几居室已经不记得了,只记得进我家屋门是一个卧室,卧室后面是厨房,而我的人生记忆放佛也是从这厨房开始的; 相比做素菜,母亲较擅长会做荤菜,那个年头的荤菜是罐子煨排骨汤、煨鸡汤;很简单粗矿的做法,罐子煨排骨汤是将盛满排骨肉加汤料的罐子放在将要烧尽的灶膛里,慢慢煨;往往是就着晚餐的灶火做,第二天吃,煨鸡汤也是同样的道理;最开心的要数快到过年的腊月二十八了,老家称这一天为还福;这一天,大家会早早在四五点就起床,父亲母亲往往会比我和妹妹起得更早,他们要忙碌祭祖的用具,在祭祖磕头的时候才叫我和妹妹起床;而在老屋里的祭祖环节已经不记得了,但记得一家四口围坐在厨房的餐桌上吃还福这一天的早晨大餐,烧豆腐、青蒜炒腊肉、油煎腊鱼干、鱼丸、肉丸、再次热好头天晚上煨好的排骨汤和鸡汤;记忆里的罐子煨好的汤上总漂着零星黑

By Jiacheng Wang

一些思考

做为系统架构师入职有一段时间了,虽然磕磕绊绊,总体来说还算有一些进步; 这里也梳理一些思考,既做总结,也为后面行事方式提出一些想法; 首先就是业务研发人员和架构师的工作职责区分; * 业务研发人员,工作职责倾向于业务需求实现,着眼于项目如期、有质量交付; * 架构师,工作职责倾向于业务需求确认,评估业务当前的、未来可能的演进状况,给出合理的系统画分、边界职责、开发规范;着眼于提高团队研发效率、保证系统的可扩展性; 一度我还是一厢情愿的想二者不应独立来看,无论从个人成长、团队整体绩效,二者应该职责合一;后来慢慢发现现实很骨干;这其中的原因,我总结如下: * 人各不同,理解问题的视角、层次不尽相同,也无法苛求一致; * 业务需求实现研发和架构合理化演进在某些层面的认知可能存在冲突; 有的人意愿沿用规则,有的人意愿创造规则;有的人被动适应变化,有的人能主动创建变化;个人的视野、思考问题的深度是受限于个人的认知;对待团队成员我们不能像对产品一样统一规格要求;这里不展开叙述; 业务需求研发强调按时按量交付,架构合理化强调研发提效和未来扩展可能,二者在某些层面可能带来冲突;症结

By Jiacheng Wang