Grpc+Grpc|Grpc+Grpc Gateway实践一 介绍与环境安装

介绍与环境安装 【Grpc+Grpc|Grpc+Grpc Gateway实践一 介绍与环境安装】假定我们有一个项目需求,希望用Rpc作为内部API的通讯,同时也想对外提供Restful Api,写两套又太繁琐不符合
于是我们想到了Grpc以及Grpc Gateway,这就是我们所需要的
Grpc+Grpc|Grpc+Grpc Gateway实践一 介绍与环境安装
文章图片

准备环节 在正式开始我们的Grpc+Grpc Gateway实践前,我们需要先配置好我们的开发环境

  • Grpc
  • Protoc Plugin
  • Protocol Buffers
  • Grpc-gateway
Grpc 是什么
Google对Grpc的定义:
A high performance, open-source universal RPC framework
也就是Grpc是一个高性能、开源的通用RPC框架,具有以下特性:
  • 强大的IDL,使用Protocol Buffers作为数据交换的格式,支持v2v3(推荐v3
  • 跨语言、跨平台,也就是Grpc支持多种平台和语言
  • 支持HTTP2,双向传输、多路复用、认证等
安装
1、官方推荐(需科学上网)
go get -u google.golang.org/grpc

2、通过github.com
进入到第一个$GOTPATH目录(因为go get 会默认安装在第一个下)下,新建google.golang.org目录,拉取golanggithub上的镜像库:
cd /usr/local/go/path/srcmkdir google.golang.orgcd google.golang.org/git clone https://github.com/grpc/grpc-gomv grpc-go/ grpc/

目录结构:
google.golang.org/ └── grpc ...

而在grpc下有许多常用的包,例如:
  • metadata:定义了grpc所支持的元数据结构,包中方法可以对MD进行获取和处理
  • credentials:实现了grpc所支持的各种认证凭据,封装了客户端对服务端进行身份验证所需要的所有状态,并做出各种断言
  • codes:定义了grpc使用的标准错误码,可通用
Protoc Plugin 是什么
编译器插件
安装
go get -u github.com/golang/protobuf/protoc-gen-go

Protoc Plugin的可执行文件从$GOPATH中移动到$GOBIN下
mv /usr/local/go/path/bin/protoc-gen-go /usr/local/go/bin/

Protocol Buffers v3 是什么
Protocol buffers are a flexible, efficient, automated mechanism for serializing structured data – think XML, but smaller, faster, and simpler. You define how you want your data to be structured once, then you can use special generated source code to easily write and read your structured data to and from a variety of data streams and using a variety of languages. You can even update your data structure without breaking deployed programs that are compiled against the "old" format.
Protocol BuffersGoogle推出的一种数据描述语言,支持多语言、多平台,它是一种二进制的格式,总得来说就是更小、更快、更简单、更灵活,目前分别有v2v3的版本,我们推荐使用v3
  • proto2 文档地址
  • proto3 文档地址
建议可以阅读下官方文档的介绍,本系列会在使用时简单介绍所涉及的内容
安装
wget https://github.com/google/protobuf/releases/download/v3.5.1/protobuf-all-3.5.1.zip unzip protobuf-all-3.5.1.zip cd protobuf-3.5.1/ ./configure make make install

检查是否安装成功
protoc --version

如果出现报错
protoc: error while loading shared libraries: libprotobuf.so.15: cannot open shared object file: No such file or directory

则执行ldconfig后,再次运行即可成功
为什么要执行ldconfig我们通过控制台输出的信息可以知道,Protocol Buffers Libraries的默认安装路径在/usr/local/lib
Libraries have been installed in: /usr/local/libIf you ever happen to want to link against installed libraries in a given directory, LIBDIR, you must either use libtool, and specify the full pathname of the library, or use the `-LLIBDIR' flag during linking and do at least one of the following: - add LIBDIR to the `LD_LIBRARY_PATH' environment variable during execution - add LIBDIR to the `LD_RUN_PATH' environment variable during linking - use the `-Wl,-rpath -Wl,LIBDIR' linker flag - have your system administrator add LIBDIR to `/etc/ld.so.conf'See any operating system documentation about shared libraries for more information, such as the ld(1) and ld.so(8) manual pages.

而我们安装了一个新的动态链接库,ldconfig一般在系统启动时运行,所以现在会找不到这个lib,因此我们要手动执行ldconfig,让动态链接库为系统所共享,它是一个动态链接库管理命令,这就是ldconfig命令的作用
protoc使用
我们按照惯例执行protoc --help(查看帮助文档),我们抽出几个常用的命令进行讲解
1、-IPATH, --proto_path=PATH:指定import搜索的目录,可指定多个,如果不指定则默认当前工作目录
2、--go_out:生成golang源文件
参数 若要将额外的参数传递给插件,可使用从输出目录中分离出来的逗号分隔的参数列表:
protoc --go_out=plugins=grpc,import_path=mypackage:. *.proto

  • import_prefix=xxx:将指定前缀添加到所有import路径的开头
  • import_path=foo/bar:如果文件没有声明go_package,则用作包。如果它包含斜杠,那么最右边的斜杠将被忽略。
  • plugins=plugin1+plugin2:指定要加载的子插件列表(我们所下载的repo中唯一的插件是grpc)
  • Mfoo/bar.proto=quux/shmeM参数,指定.proto文件编译后的包名(foo/bar.proto编译后为包名为quux/shme
Grpc支持 如果proto文件指定了RPC服务,protoc-gen-go可以生成与grpc相兼容的代码,我们仅需要将plugins=grpc参数传递给--go_out,就可以达到这个目的
protoc --go_out=plugins=grpc:. *.proto

Grpc-gateway 是什么
grpc-gateway is a plugin of protoc. It reads gRPC service definition, and generates a reverse-proxy server which translates a RESTful JSON API into gRPC. This server is generated according to custom options in your gRPC definition.
grpc-gateway是protoc的一个插件。它读取gRPC服务定义,并生成一个反向代理服务器,将RESTful JSON API转换为gRPC。此服务器是根据gRPC定义中的自定义选项生成的。
安装
go get -u github.com/grpc-ecosystem/grpc-gateway/protoc-gen-grpc-gateway

如果出现以下报错,我们分析错误提示可得知是连接超时(大概是被墙了)
package google.golang.org/genproto/googleapis/api/annotations: unrecognized import path "google.golang.org/genproto/googleapis/api/annotations" (https fetch: Get https://google.golang.org/genproto/googleapis/api/annotations?go-get=1: dial tcp 216.239.37.1:443: getsockopt: connection timed out)

有两种解决方法,
1、科学上网
2、通过github.com
进入到第一个$GOPATH目录的google.golang.org目录下,拉取genprotogithub上的go-genproto镜像库:
cd /usr/local/go/path/src/google.golang.orggit clone https://github.com/google/go-genproto.gitmv go-genproto/ genproto/

在安装完毕后,我们将grpc-gateway的可执行文件从$GOPATH中移动到$GOBIN
mv /usr/local/go/path/bin/protoc-gen-grpc-gateway /usr/local/go/bin/

到这里我们这节就基本完成了,建议多反复看几遍加深对各个组件的理解!
参考 示例代码
  • grpc-hello-world

    推荐阅读