微服务系统和数据库设计方案

上传人:工**** 文档编号:554900500 上传时间:2022-12-09 格式:DOCX 页数:28 大小:928.61KB
返回 下载 相关 举报
微服务系统和数据库设计方案_第1页
第1页 / 共28页
微服务系统和数据库设计方案_第2页
第2页 / 共28页
微服务系统和数据库设计方案_第3页
第3页 / 共28页
微服务系统和数据库设计方案_第4页
第4页 / 共28页
微服务系统和数据库设计方案_第5页
第5页 / 共28页
点击查看更多>>
资源描述

《微服务系统和数据库设计方案》由会员分享,可在线阅读,更多相关《微服务系统和数据库设计方案(28页珍藏版)》请在金锄头文库上搜索。

1、微服务系统和数据库设计方案1 .微服务本质微服务架构从本质上说其实就是分布式架构,与其说是一种新架构, 不如说是一种微服务架构风格。简单来说,微服务架构风格是要开发一种由多个小服务组成的应用。每个服务运行于独立的进程,并且采用轻量级交互。多数情况下是一个HTTP的资源API。这些服务具备独立业务能力并可以通过自动化部署方式独立部署。这种风格使最小化集中管理,从而可以使用多种不同的编程语言和数据存储技术。对于微服务架构系统, 由于其服务粒度小, 模块化清晰,因此首先要做的是对系统整体 进行功能、服务规划,优先考虑如何在交付过程中,从工程实践出发,组织好代码结构、配 置、测试、部署、运维、监控的整

2、个过程,从而有效体现微服务的独立性与可部署性。本文将从微服务系统的设计阶段、开发阶段、测试阶段、部署阶段进行综合阐述。理解微服务架构和理念是核心。2 .系统环境名称版本说明JDK1.8Spring BootSpring FrameworkRibbonkafkaRabbitMQ3 . 微服务架构的挑战可靠性:由于采用远程调用的方式, 任何一个节点、 网络出现问题, 都将使得服务调用失败,随着微服务数量的增多,潜在故障点也将增多。也就是没有充分的保障机制,则单点故障会大量增加。运维要求高:系统监控、高可用性、自动化技术分布式复杂性:网络延迟、系统容错、分布式事务部署依赖性强:服务依赖、多版本问题性

3、能(服务间通讯成本高):无状态性、进程间调用、跨网络调用数 据一致性:分布式事务管理需要跨越多个节点来保证数据的瞬时一致性, 因此比起传统的单体架构的事务,成本要高得多。另外, 在分布式系统中,通常会考虑通过数据的最终一致性来解决数据瞬时一致带来的系统不可用。重复开发:微服务理念崇尚每个微服务作为一个产品看待, 有自己的团队开发, 甚至可以有自己完全不同的技术、 框架, 那么与其他微服务团队的技术共享就产生了矛盾, 重复开发的工 作即产生了。4 . 架构设计4.1. 思维设计微服务架构设计的根本目的是实现价值交付,微服务架构只有遵循DevOps理念方可进行的更顺畅,思维方式的转变是最重要的。自

4、动化可幌化交源库取mQb苴实现微服务技术架构, 现有产品需要进行技术上的改进以及相关配套服务的实现,采用分阶段实施、以及试点产品优先实施的策略,主要包括如下:一、技术上的改进:1、前后端分离,web前端通过Http/Https协议调用微服务的 API网关,由API网关再 经过路由服务调用相应的微服务2、不同微服务之间通过 RESTT式互相调用3、微服务之间通过消息中间件实现消息交互机制二、配套服务与功能实现:1、需要进行相应的自动化服务实现,包括自动化构建、自动化安装部署、自动化测试、自动化平台发布(Docker实现)2、管理服务,对于微服务架构,必须配套相应的监控与管理服务、日志管理服务等3

5、、协作服务,运用 DevOps思想提升开发、测试、运维的高效沟通与协作,实现开发 与运维的一体化最新可编辑word文档4.2.微服务架构设计No SuggestWEBUJServices RegistrySpring CloudEureka ServerSvn/Avsn架构图1Zuul AfjlZuul Api GdLewHy肺bcmNjRFiKeb 器的HlbbOfi笈赳均衡班就均於岫闻?证 曲题篇HvurhEureka注册勺心业如槌招策用irdru 新擀1Feign 口陋nt棺若集用绮LfentHyitfur跻希Spring SeddonSprirw Sc:好布式事第中心RM总存池5)ri

6、nj Cloud匚0加1置中心 CGH港单业帚*我势集酎pringAdninTurHiw 商疑监控Zlffan口感B际实时分布式u太累跳loestdslwElisicSeafclwKrbwiH最新可编辑word文档架构图 21、我们把整个系统根据业务拆分成若干个子系统或微服务。2、每个子系统可以部署多个应用,多个应用之间使用负载均衡。3、需要一个服务注册中心Eureka,所有的服务都在注册中心注册,负载均衡也是通过在注册中心注册的服务来使用一定策略来实现。 Eureka 可部署多个,进行高可用保证。4、所有的客户端都通过同一个网关地址访问后台的服务,通过路由配置ZUUL 网关来判断一个URL请

7、求由哪个服务处理。请求转发到服务上的时候使用负载均衡Ribbon。5、服务之间采用feign 进行调用。6、 使用断路器hystrix , 及时处理服务调用时的超时和错误, 防止由于其中一个服务的问题而导致整体系统的瘫痪。7、还需要一个监控功能,监控每个服务调用花费的时间等。8 、使用SpringCloud Config 进行统一的配置管理,需要考虑与公司的配置管理平台如何配合使用。9 、 Hystrix ,监控和断路器。我们只需要在服务接口上添加Hystrix 标签,就可以实现对这个接口的监控和断路器功能。10 、 Hystrix Dashboard ,监控面板,他提供了一个界面,可以监控各

8、个服务上的服务调 用所消耗的时间等。11、Turbine,监控聚合,使用 Hystrix监控,我们需要打开每一个服务实例的监控信 息来查看。 而 Turbine 可以帮助我们把所有的服务实例的监控信息聚合到一个地方统一查看。这样就不需要挨个打开一个个的页面一个个查看。架构的可靠性保证:在关键节点做主备、集群部署,防止单点故障。 待后续确认问题:1、Access Control: Zuul网关提供了相关控制功能,与我司CAS如何结合使用2、 Config Server: Spring Cloud 提供了远程配置中心,与我司的配置管理平台如何结合使用5. 设计阶段5.1. 总体设计1、功能规划:对

9、产品功能进行拆分,拆分为若干个微服务;一个功能可以创建多个微服务并部署在多个服务器节点上,以便进行负载均衡。2、设计原子服务层,梳理和抽取核心应用、公共应用,作为独立的服务下沉到核心和公共能力层,逐渐形成稳定的服务中心,使应用能更快速的响应多变的客户需求。3、为每个服务设计 API接口( RESTT式)4、为不同的服务进行分类,不同类型的服务需要的资源不同,可以配置不同的资源,包才CPU内存、存储等。5.2. 服务拆分原则1、粒度微小:根据业务功能划分服务粒度,总的原则是服务内部高内聚,服务之间低耦合。2、责任单一:每个服务只做一件事,即单一职责原则。3、隔离性原则:每个服务相互隔离,且不互相

10、影响4、业务无关优先原则:基础服务,是一些基础组件,与具体的业务无关。比如:短信服务、邮件服务。这 里的服务最容易划分出来做微服务,也是我们第一优先级分离出来的服务。5.3. 服务规划为实现负载均衡, 允许相同的服务在多个节点注册相同的服务名, 不同的端口。 如果没有前期的规划, 不同的服务提供者可能会注册相同的服务名, 导致消费者调用服务时产生调用混乱。因此,需进行服务名的统一规划:1、规划期统一制定每个服务提供者的服务名或者模块标示。2、服务名的命名规则:ModuleName_ServiceName ,且所有字符小写,不同单词之间以下划线分隔。如用户管理模块提供了获取用户信息的服务,则命名

11、为: user_get_info 。3、新增服务名时,需要提出申请,审批通过后方可使用,为减少审批复杂度,可只审批 ModuleName ,即在模块内部可以自由增加服务名,不需要进行审批。5.4. 开发策略总体原则:不同的微服务需进行物理隔离。1、SVN策略:SVN上创建独立的分支,不同微服务的代码提交不受相互影响;-由配置管理员统一控制。问题:开发分支与集成分支,都将增加很多,维护工作量增加。2、编译策略:代码编译时,各个微服务独立编译、打包,杜绝直接的依赖;3、工程构建:代码开发时,各微服务创建独立的工程,工程之间不能产生直接依赖4、持续集成:每个微服务独立执行持续集成。5、版本集成:由统

12、一的集成工具,实现自动化的版本集成,将所有微服务集成到统一 的版本发布包中。5.5. 版本策略每个微服务可以独立制作版本,伴随着服务的增多,SVN分支增多,版本也将增多,版本管理的复杂度将成指数级增加。 在服务之间依赖较多时, 每个服务的升级或降级都将影响 其他服务的正常运行。因此需执行如下策略:1、所有服务的版本制作交由专业的版本管理员执行。2、采用自动化的版本制作策略,最大程度的减少人工操作。3、每个服务的版本必须有详细的版本计划、版本说明,对于版本说明要制定模板,明确需要提交的内容、版本号、SVN标签等。4、对项目经理的要求提升,需对整体的版本计划有严格的制定,尤其是版本之间的依赖关系要

13、非常明确,版本升级、降级的风险评估需完全充分。发公告等流程。5、 接口管理: 严格执行接口管理制度,任何接口的变更必须进行审批、5.6. 数据库挑战与策略每个微服务都有自己独立的数据库, 那么后台管理的联合查询怎么处理?这应该是大家会普遍遇到的一个问题,有四种处理方案。1)严格按照微服务的划分来做,微服务相互独立,各微服务数据库也独立,后台需要 展示数据时, 调用各微服务的接口来获取对应的数据, 再进行数据处理后展示出来, 这是标准的用法,也是最麻烦的用法。2) 将业务高度相关的表放到一个库中,将业务关系不是很紧密的表严格按照微服务模式来拆分,这样既可以使用微服务,也避免了数据库分散导致后台系

14、统统计功能难以实现, 是一个折中的方案。3) MySQL+MHA高可用架构 、MySQL分布式 Proxy水平扩展架构、 MySQL缓存高并 发读架构、MySQL小文件系统大字段存取架构、MySQL Inforbright/Greenplum统计分析架构。4)数据库严格按照微服务的要求来切分,以满足业务高并发,实时或者准实时将各微服务数据库数据同步到 NoSQL 数据库中,在同步的过程中进行数据清洗,用来满足后台业务系统的使用,推荐使用 MongoDB、HBase等。第一种方案适合业务较为简单的小公司; 第二种方案, 适合在原有系统之上, 慢慢演化为微服务架构的公司; 第三种适合大型高并发的互联网公司; 第四种适合超大型扩张能力强 高并发公司。建议,我们当前采用第二种方案。5.7. 负载均衡不再采用一般的增加负载均衡服务器的方式进行负载均衡,如 F5、Nginx、LVS等,而 是把负载均衡的功能以库的方式集成到服务消费方的进程内,这种方案称为软负载均衡(Soft Load Balancing) 或者客户端负载均衡。 在 Spring Cloud 中配合 Eureka 的服务注册功能,Ribbon子项目则为RES珞户

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 学术论文 > 其它学术论文

电脑版 |金锄头文库版权所有
经营许可证:蜀ICP备13022795号 | 川公网安备 51140202000112号