每日一书|每日一书丨学习微服务最好的方式（阅读《微服务架构设计模式》） java|微服务

本文是对《微服务架构设计模式》一书的的阅读心得总结。作者：曹春晖，资深 Gopher，web 领域多年开发经验，曾在滴滴与蚂蚁金服任职。

如果你经常查阅微服务资料的话，一定总会上 microservices.io 这个网站，它总结了微服务方方面面的设计模式。而这个网站的作者就是 Chris Richardson。

文章图片

作者多年的从业经验在 2018 年成为了《Microservices patterns》这本书，一上市便得到了全球IT人士极大的关注，先后被翻译为中、日、韩、俄等多国语言。

文章图片

中文版《微服务架构设计模式》由机械工业出版社于2019 年引进国内。当时我第一时间购入了这本书，中间断断续续地一直没看完。最近准备分享内容的时候又翻起这本书，这次完整地读完了一遍。感觉应该是目前微服务领域最好的一本书了。另一本《Building Microservices》也不错，不过内容还是稍微单薄了一些。

文章图片

这本书为我们提供了宏观上俯瞰微服务整个生态的大图，比如：

文章图片

当然，18 年的时候，service mesh 之类的东西还没有太火，所以后来在网站上有个更新的版本：

文章图片

个人很喜欢这种大图，不管什么领域，我只要照着图去一点一点填坑就行了，没有这样的图，总觉得是在望不见头的技术森林里兜兜转转，找不到北。
下面简单写一写我对这本书的总结（里面 saga 和测试的部分我就先省略了）。
单体服务的困境

文章图片

在单体时代，大家在一个仓库里开发，代码冲突解决起来很麻烦，上线的 CI/CD pipeline 也是等待到死。

文章图片

拆分了以后，至少大家有各自的代码库，各自的上线流程，各自的线上服务。这样上线不打架了，上线以后也可以自己玩自己的灰度流程，一般不会互相影响。
服务拆分虽然说是拆了，不过拆分也是要讲究方法的。

文章图片

书里提供了两种思路，一种是按照业务/商业能力拆分，一种是按照 DDD 中的 sub domain 拆分。

供应商管理

- 送餐员信息管理
- 餐馆信息管理：管理餐馆的订单、营业时间、营业地点

消费者管理

- 管理消费者信息

订单获取和履行

- 消费者订单管理：让消费者可以创建、管理订单
- 餐馆订单管理：让餐馆可以管理订单的准备过程

送餐管理

- 送餐员状态管理：管理可以进行接单操作的送餐员的实时状态
- 配送管理：订单配送追踪

会计

- 消费者记账：管理消费者的订单记录
- 餐馆记账：管理餐馆的支付记录
- 配送员记账：管理配送员的收入信息

文章图片

最终大概会形成上面这些服务。
用 DDD 来做分析，其实我们得到的结果也差不多：

文章图片

在拆分时，我们还应该用 SOLID 中的 SRP 原则和另外一个闭包原则 CCP(common closure principle) 来进行指导。
在拆分后，也要注意微服务的拆分会额外给我们带来的问题：

网络延迟
服务间同步通信导致可用性降低
在服务间维持数据一致性
获取一致的数据视图
阻塞拆分的上帝类

服务集成分布式服务通信大概可以分为 one-to-one 和 one-to-many：

文章图片

RPC 很好理解，同步的 request/response。异步通信，一种是回调式的 request/response，一种是一对多的 pub/sub。
具体到 RPC 的话，可以使用多种协议和框架：

文章图片

不过当 API 更新时，应该遵循 semver 的规范进行更新。社区里 gRPC 很多次更新都没有遵守 semver，给它的依赖方都造成了不小的麻烦。感兴趣的同学应该可以搜到一些相关的事件。
不得不说 Google 的程序员也并不是事事靠谱。

文章图片

RPC 进行服务集成的时候，要注意不要被某些不稳定的服务慢响应拖死，要注意设置超时，熔断。
服务与服务之间要能找得到彼此，有两种方式，一种是基于服务注册中心的服务发现。

文章图片

一种是基于 dns 的服务发现。基于 DNS 的现在应该不太多了。

文章图片

除了 RPC 以外，还可以使用消息来进行服务间的集成。

文章图片

使用 MQ 也可以模拟 RPC 的 request/response，不过这样会使你的服务强依赖于 MQ，如果 MQ 故障，那整个系统随之崩溃。

文章图片

一般我们使用的是 broker-based mq 通信，但也有无 broker 的异步通信，书中这里举了个 ZeroMQ 的例子，之前个人不是很了解，需要再调研一下。

文章图片

Event Sourcing

文章图片

event sourcing 是一种特殊的设计模式，不记录实体的终态，而是记录所有状态修改的事件。然后通过对事件进行计算来得到实体最终的状态。

文章图片

但这样事件累积太多以后会有性能问题，所以可以对一部分历史数据进行计算，得到一个中间的快照，之后的计算在快照的基础上再叠加。
看起来方案很酷，我们在实际工作中也确实在一些下游的计算逻辑中使用过这种设计模式，不过它也是有缺陷的：

事件本身结构变化时，新老版本兼容比较难做
如果代码中要同时处理新老版本数据，那么升级几次后会非常难维护
因为容易追溯，所以删除数据变得非常麻烦，GDPR 类的法规要求用户注销时必须将历史数据删除干净，这对 Event Sourcing 是一个巨大的挑战

在使用异步消息来做解耦的时候，我们也会遇到一些实际的业务问题：

这个数据我需要，你能不能在消息里帮我透传一下
你重构的时候怎么把这个字段删了，我还要用呢
你们原来的状态机变更都有 event，本来有三个，怎么现在变成两个了？
你们 API 故障的时候，怎么消息顺序乱了？

这要求我们能有对上游的领域事件进行校验的系统，这里可以参考 Google 的 schema validation 这个项目，之前我在《MQ 正在变成臭水沟》一文中有详述。这里就不提了。
查询模式很多查询逻辑其实就是进行 API 的数据组合，这个涉及到需要组合数据的 API 组合器，和数据提供方：

API 组合器：通过查询数据提供方的服务实现查询操作
数据提供方：提供数据

文章图片

虽然看起来挺简单，写代码的时候，下面这些问题还是难处理：

谁来负责拼装这些数据？有时是应用，有时是外部的 API Gateway，难以定立统一的标准，在公司里也经常扯皮
增加额外的开销-一个请求要查询很多接口
可用性降低-每个服务可用性 99.5%，实际接口可能是 99.5^5=97.5
事务数据一致性难保障-需要使用分布式事务框架/使用事务消息和幂等消费

CQRS 业务开发经常自嘲是 CRUD 工程师，在架构设计里，CRUD 的 R 可以单独拆出来，像下面这样。

文章图片

拆出来的好处？互联网大多是写少读多的服务，将关注点分离之后，读服务和写服务的存储可以做异构。
比如写可以是 MySQL，而读则可以是各种非常容易做横向扩展的 NoSQL。碰到检索需求，读还可以是 Elasticsearch。

文章图片

读服务可以订阅写服务的 domain event，也可以是 MySQL 的 binlog。

文章图片

在消费上游数据时，需要根据业务逻辑去判断有些状态机要怎么做处理。这里其实数据上是有耦合的，并不是放个 MQ 和 domain event 就能解耦干净了。

文章图片

CQRS 的缺点也比较明显：

架构复杂
数据复制延迟问题
查询一致性问题
并发更新问题处理
幂等问题需要处理

外部 API 模式现在的互联网公司一般客户端都是多端，web、移动、向第三方开放的 open API。

文章图片

如果我们直接把之前用拆分方法拆出来的这些内部 API 开放出去，那未来内部的 API 想升级就会非常非常地麻烦。
在单体时代，客户端走弱网 internet，只需要一次调用。微服务化以后，如果不做任何优化，那在 internet 这种慢速网络上就需要有多次调用。

文章图片

这就是我们为什么需要中间有一个 API Gateway 的原因。

文章图片

有了 Gateway 之后，在 internet 依然还是一次调用，在内部 IDC 强网络的状态下多次网路调用相对没有那么糟糕。

文章图片

API Gateway 涉及到这些不同端的 API Gateway 应该要谁来维护的问题。下面是一种理想的情况，Mobile 团队负责维护他们在 Gateway 里的 API(也可能是单独的 Gateway)，web 端团队维护 web 的 Gateway，open API 团队负责维护第三方应用的 Gateway API。
网关基础设施团队负责提供这三方都需要的基础库。

文章图片

在研发 API Gateway 的时候，我们有多种可选项：

直接使用开源产品

- Kong
- APISix
- Traefik

自研

- Zuul
- Spring Cloud Gateway
- RESTFul 自己做一个
- GraphQL 自己做一个

开源的 API Gateway 大多不支持 API 数据组合功能，所以公司内的 API Gateway 有时候有两层，一层是 nginx 之类的负责简单路由和鉴权的 gateway，后面还有一个业务的 BFF 来负责拼装端上需要的数据。
如果我们都是自研，那就可以在一个模块上把 API Gateway 需要的功能都实现。这里经常讨论的一个问题是，我们是要使用 REST 还是类似 GraphQL 的图查询。
Netflix 的工程师在 2012 年发表过一篇文章：

文章图片

《为什么 REST 让我半夜睡不着》，老哥还挺幽默。内容大概是讲 Netflix 要面对成百上千的终端设备，Netflix 曾经希望能给所有终端提供大一统的方案，大家使用统一的 REST API，但后来发现这种统一的方式是放弃了对任一有自己特性的设备的优化，比如有些设备内存小，有些设备屏幕小，这些设备上你返回的很多字段数据对他们来说根本就用不上，纯粹是浪费网络带宽。有些设备用流式响应比返回完整响应性能更好，这也应该是要考虑的优化点。
所以 Netflix 做了一个叫 falcor 的方案，其实和后来 Facebook 的 GraphQL 非常类似，是用 JSON Graph 来描述内部 API 能提供的数据，然后用 JS 来定制图上的查询。
现在大多数人比较熟悉的还是 GraphQL：

文章图片

GraphQL 是个好东西，但之前我个人对使用 GraphQL 一直持怀疑态度，主要是因为：

网关容易被客户端的修改直接带崩
稳定性非常难保障
中文互联网上讲 GraphQL 的基本都没有提到限流，或者一笔带过，这是不太负责任的

这本《微服务架构设计模式》难能可贵的地方在于几乎所有的技术方案，都很详尽地给出了优劣，这在其它书里是比较少见的。我们在某些人的文章和方案里永远只能看到优点，但在实践中落地技术方案的时候，其实更关注缺陷。对缺陷有心理准备，才不会在新方案出问题的时候心慌。
个人觉得这本书，无论是对微服务刚入门，或是工作几年的人，都值得一读。
推荐阅读

文章图片

本书由世界十大软件架构师之一、微服务架构的先驱、Java开发者社区的意见领袖Chris Richardson亲笔撰写，旨在帮助架构师和程序员学会使用微服务架构成功开发应用程序。书中描述了如何解决我们将面临的众多架构设计挑战，包括如何管理分布式数据，还介绍了如何将单体应用程序重构为微服务架构，涵盖44个架构设计模式，系统解决服务拆分、事务管理、查询和跨服务通信等难题。本书并不是鼓吹微服务架构的宣言，作者既介绍了微服务的原理、原则，又详细讲解了实际落地中的架构设计模式，将使你理解微服务架构、它的好处和弊端，以及应该何时使用微服务架构。本书将帮助你建立微服务的全局视野，并学会在纷繁复杂的情况下做出正确的架构选择和取舍。
本书将教会你如何开发和部署生产级别的微服务架构应用。这套宝贵的架构设计模式建立在数十年的分布式系统经验之上，Chris还为开发服务添加了新的模式，并将它们组合成可在真实条件下可靠地扩展和执行的系统。本书不仅仅是一个模式目录，还提供了经验驱动的建议，以帮助你设计、实现、测试和部署基于微服务的应用程序。
本书包含：
●如何（以及为什么）使用微服务架构
●服务拆分的策略
●事务管理和查询相关的模式
●高效的测试策略
●包括容器和Serverless在内的部署模式
本书专为熟悉标准企业应用程序架构的开发人员编写，使用Java语言和Spring框架编写所有示例代码。
【每日一书|每日一书丨学习微服务最好的方式（阅读《微服务架构设计模式》）】 声明：本文转自“华章计算机”公众号