SpringBoot整合高性能微服务框架 gRPC

Love The Way You Lie 2022-09-02 15:53 453阅读 0赞

1、简介

gRPC是Google开源的通用高性能RPC框架。在 gRPC 里,客户端应用可以像调用本地对象一样直接调用另一台不同的机器上服务端应用的方法,使得我们能够更容易地创建分布式应用和服务。

gRPC 基于 HTTP/2 标准设计,带来诸如双向流、流控、头部压缩、单 TCP 连接上的多复用请求等。这些特性使得其在移动设备上表现更好,更省电和节省空间占用

目前有非常多优秀的开源项目采用 gRPC 作为通信方式,例如说 Kubernetes、SkyWalking、istio 等等。甚至说, Dubbo 自 2.7.5 版本之后,开始提供对 gRPC 协议的支持

gRPC 主要提供了新增两种 RPC 调用方式:

  • 普通 RPC 调用方式,即请求 - 响应模式。
  • 基于 HTTP/2.0 的 streaming 调用方式。

gRPC 服务调用支持同步和异步方式,同时也支持普通的 RPC 和 streaming 模式,可以最大程度满足业务的需求。

streaming 模式,可以充分利用 HTTP/2.0 协议的多路复用功能,实现在一条 HTTP 链路上并行双向传输数据,有效的解决了 HTTP/1.X 的数据单向传输问题,在大幅减少 HTTP 连接的情况下,充分利用单条链路的性能,可以媲美传统的 RPC 私有长连接协议:更少的链路、更高的性能

beb2b26d553450d23437f277dbe5d07f.png

gRPC 的网络 I/O 通信基于 Netty 构建

  1. 服务调用底层统一使用异步方式
  2. 同步调用是在异步的基础上做了上层封装。

因此,gRPC 的异步化是比较彻底的,对于提升 I/O 密集型业务的吞吐量和可靠性有很大的帮助。

netty采用多路复用的 Reactor 线程模型:基于 Linux 的 epoll 和 Selector,一个 I/O 线程可以并行处理成百上千条链路,解决了传统同步 I/O 通信线程膨胀的问题。NIO 解决的是通信层面的异步问题,跟服务调用的异步没有必然关系。

应用场景:

公司早期,为了满足业务快速迭代,技术选型随意,经常遇到多种语言开发,比如:java、python、php、.net 等搭建了不同的业务系统。现在考虑平台化技术升级,一些基础功能需要收拢统一,建设若干微服务中心(如:用户中心、权限中心)。基于此背景,如何做技术选型,我们可以考虑使用gRPC。

gRPC实现步骤:

  • 定义一个服务,指定其能够被远程调用的方法(包含参数、返回类型)
  • 在服务端实现这个接口,并运行一个 gRPC 服务器来处理客户端请求
  • 在客户端实现一个存根 Stub ,用于发起远程方法调用

fe5155d3b022f5f36552975419293316.png

gRPC 客户端和服务端可以在多种语言与环境中运行和交互!我们可以很容易地用 Java 创建一个 gRPC 服务端,用 Java、Go、Python、Ruby 来创建 gRPC 客户端来访问它。

2、proto 接口规范

在pom.xml中添加以下依赖项:

  1. <dependency>
  2. <groupId>io.grpc</groupId>
  3. <artifactId>grpc-netty</artifactId>
  4. <version>${grpc.version}</version>
  5. </dependency>
  6. <dependency>
  7. <groupId>io.grpc</groupId>
  8. <artifactId>grpc-protobuf</artifactId>
  9. <version>${grpc.version}</version>
  10. </dependency>
  11. <dependency>
  12. <groupId>io.grpc</groupId>
  13. <artifactId>grpc-stub</artifactId>
  14. <version>${grpc.version}</version>
  15. </dependency>
  • 引入 grpc-protobuf 依赖,使用 Protobuf 作为序列化库。
  • 引入 grpc-stub 依赖,使用 gRPC Stub 作为客户端。

添加maven依赖

  1. <build>
  2. <extensions>
  3. <extension>
  4. <groupId>kr.motd.maven</groupId>
  5. <artifactId>os-maven-plugin</artifactId>
  6. <version>1.5.0.Final</version>
  7. </extension>
  8. </extensions>
  9. <plugins>
  10. <plugin>
  11. <groupId>org.xolstice.maven.plugins</groupId>
  12. <artifactId>protobuf-maven-plugin</artifactId>
  13. <version>0.5.1</version>
  14. <configuration>
  15. <protocArtifact>com.google.protobuf:protoc:3.5.1-1:exe:${os.detected.classifier}</protocArtifact>
  16. <pluginId>grpc-java</pluginId>
  17. <pluginArtifact>io.grpc:protoc-gen-grpc-java:1.15.0:exe:${os.detected.classifier}</pluginArtifact>
  18. </configuration>
  19. <executions>
  20. <execution>
  21. <goals>
  22. <goal>compile</goal>
  23. <goal>compile-custom</goal>
  24. </goals>
  25. </execution>
  26. </executions>
  27. </plugin>
  28. </plugins>
  29. </build>
  • 引入 os-maven-plugin 插件,从 OS 系统中获取参数。因为需要通过它从 OS 系统中获取 os.detected.classifier 参数。
  • 引入 protobuf-maven-plugin 插件,实现将proto 目录下的protobuf 文件,生成ServiceMessage 类。

定义proto接口规范

  1. service UserService {
  2. rpc query (UserRequest) returns (UserResponse);
  3. }
  4. message UserRequest {
  5. string name = 1;
  6. }
  7. message UserResponse {
  8. string name = 1;
  9. int32 age = 2;
  10. string address = 3;
  11. }

点击 IDEA 的「compile」按钮,编译 spring-boot-bulking-grpc-proto 项目,并同时执行 protobuf-maven-plugin 插件进行生成。结果如下图所示:

83ddb3380b2f0ced253b364cbdc5a02f.png

3、服务端实现

定义注解类,用于扫描Grpc相关接口服务

  1. @Target({ElementType.TYPE})
  2. @Retention(RetentionPolicy.RUNTIME)
  3. @Documented
  4. @Component
  5. public @interface GrpcService {
  6. }

接口实现类

  1. @GrpcService
  2. public class UserService extends UserServiceGrpc.UserServiceImplBase {
  3. @Override
  4. public void query(UserRequest request, StreamObserver<UserResponse> responseObserver) {
  5. System.out.println(" UserService 接收到的参数,name:" + request.getName());
  6. UserResponse response = UserResponse.newBuilder().setName("微观技术").setAge(30).setAddress("上海").build();
  7. responseObserver.onNext(response);
  8. responseObserver.onCompleted();
  9. }
  10. }

启动grpc server端,监听9091端口,并添加proto定义的接口实现类

  1. @Component
  2. public class ServiceManager {
  3. private Server server;
  4. private int grpcServerPort = 9091;
  5. public void loadService(Map<String, Object> grpcServiceBeanMap) throws IOException, InterruptedException {
  6. ServerBuilder serverBuilder = ServerBuilder.forPort(grpcServerPort);
  7. // 采用注解扫描方式,添加服务
  8. for (Object bean : grpcServiceBeanMap.values()) {
  9. serverBuilder.addService((BindableService) bean);
  10. System.out.println(bean.getClass().getSimpleName() + " is regist in Spring Boot!");
  11. }
  12. server = serverBuilder.build().start();
  13. System.out.println("grpc server is started at " + grpcServerPort);
  14. // 增加一个钩子,当JVM进程退出时,Server 关闭
  15. Runtime.getRuntime().addShutdownHook(new Thread() {
  16. @Override
  17. public void run() {
  18. System.err.println("*** shutting down gRPC server since JVM is shutting down");
  19. if (server != null) {
  20. server.shutdown();
  21. }
  22. System.err.println("*** server shut down!!!!");
  23. }
  24. });
  25. server.awaitTermination();
  26. }
  27. }

Server 端启动成功

edfac29d966f17e7a5f11e0ea5006668.png

4、客户端调用

定义接口的Stub实例,用于发起远程服务调用

  1. @Configuration
  2. public class GrpcServiceConfig {
  3. @Bean
  4. public ManagedChannel getChannel() {
  5. ManagedChannel channel = ManagedChannelBuilder.forAddress("localhost", 9091)
  6. .usePlaintext()
  7. .build();
  8. return channel;
  9. }
  10. @Bean
  11. public HelloServiceGrpc.HelloServiceBlockingStub getStub1(ManagedChannel channel) {
  12. return HelloServiceGrpc.newBlockingStub(channel);
  13. }
  14. @Bean
  15. public UserServiceGrpc.UserServiceBlockingStub getStub2(ManagedChannel channel) {
  16. return UserServiceGrpc.newBlockingStub(channel);
  17. }
  18. }

Restful接口调用,访问:http://localhost:8098/query

  1. @RequestMapping("/query")
  2. public String query() {
  3. UserRequest request = UserRequest.newBuilder()
  4. .setName("微观技术")
  5. .build();
  6. UserResponse userResponse = userServiceBlockingStub.query(request);
  7. String result = String.format("name:%s , age:%s , address:%s ", userResponse.getName(), userResponse.getAge(), userResponse.getAddress());
  8. System.out.println(result);
  9. return result;
  10. }

5、开箱即用 Starter 组件

gRPC 社区暂时没有提供 Spring Boot Starter 库,以简化我们对 gRPC 的配置。不过国内有大神已经开源了一个。

地址: https://github.com/yidongnan/grpc-spring-boot-starter

特性:

  • 在 spring boot 应用中,通过 @GrpcService 自动配置并运行一个嵌入式的 gRPC 服务
  • 使用 @GrpcClient 自动创建和管理你的 gRPC Channels 和 stubs
  • 支持 Spring Cloud (向 Consul 或 Eureka 或 Nacos 注册服务并获取gRPC服务信息)
  • 支持 Spring Sleuth 进行链路跟踪(需要单独引入 brave-instrumentation-grpc)
  • 支持对 server、client 分别设置全局拦截器或单个的拦截器
  • 支持 Spring-Security
  • 支持metric (基于 micrometer / actuator )
  • 也适用于 (non-shaded) grpc-netty

6、项目源码地址

  1. https://github.com/aalansehaiyang/spring-boot-bulking
  2. 三个模块:
  3. spring-boot-bulking-grpc-proto
  4. spring-boot-bulking-grpc-client
  5. spring-boot-bulking-grpc-server

发表评论

表情:
评论列表 (有 0 条评论,453人围观)

还没有评论,来说两句吧...

相关阅读