广告
返回顶部
首页 > 资讯 > 后端开发 > Python >深入理解DevOps+微服务框架
  • 488
分享到

深入理解DevOps+微服务框架

2024-04-02 19:04:59 488人浏览 独家记忆

Python 官方文档:入门教程 => 点击学习

摘要

单体架构 单体架构是什么 在搞懂devops和微服务之前,需要先搞懂什么是单体应用/单体架构。简单来说,就跟在校的一些小项目一样,项目的Demo写好了,找一台服务器安装环境,然后把j

单体架构

单体架构是什么

在搞懂devops微服务之前,需要先搞懂什么是单体应用/单体架构。简单来说,就跟在校的一些小项目一样,项目的Demo写好了,找一台服务器安装环境,然后把jar包远程上服务器,然后跑起来服务就可以了。这个时候进行简单的服务监控也不难,如果项目出了问题,查看一下运行日志,就可以知道哪一步出问题了。如果懂一些脚本,也可以写一些脚本分析日志,解放双手监控服务器。这种单体架构就是采用瀑布流方式开发的,服务的流程就是:设计 -> 开发 -> 测试 -> 部署 。

单体B/S架构

在还没有微服务和DevOps之前,一个WEB应用的上线,一般都是将所有的功能都打包在一起,也就是都在一个项目包里面,然后将项目打包到一个服务器上跑起来就可以了,那个时候的B/S应用架构就是单体架构,结构图如下:

单体B/S+负载均衡

如果当用户访问量变大导致一台服务器无法支撑时,就需要加服务器进行负载均衡,这个时候架构的形式就是:单体B/S+负载均衡

单体B/S+前后端分离(CDN)

用了一段时间负载均衡之后,发现通过CDN手段,把静态文件独立,可以加速服务,提升应用速度,所以单体架构就进一步演变成了:B/S+前后端分离(CDN)

单体架构总结

上面所说的架构都是单体应用,只是某方面的部署形式进行了优化与改动,所以最终都避免不了单体应用的普遍缺陷:

单体

1、代码量大,应用启动时间较长。
2、测试周期长,更改Bug需要对全部业务进行回归测试。
3、应用容错性差,当某个程序出错后,导致整个项目业务宕机。
4、伸缩性困难,只能整个应用进行扩展,浪费资源。
5、开发协作性困难,项目人员都在维护一套代码,协作周期长、难度大。

DevOps

DevOps是什么

DevOps:Development和Operations的组合词,是一种重视“软件开发人员(Dev)”和“IT运维技术人员(Ops)”之间沟通合作的文化、运动或惯例。透过自动化“软件交付”和“架构变更”的流程,来使得构建、测试、发布软件能够更加地快捷、频繁和可靠。

分布式架构+敏捷开发模式

随着上述说的单体架构时,业务流量越来越大,那么肯定几台服务器是不够用的,这个时候就会加很多服务器机器,也会加入Nignx、CDN、缓存消息队列等技术栈,同时开发人员也会变多,这个时候就是 多人多机协同开发问题。

多人协同开发的问题

这个时候,大多会将项目进行拆分,每个人负责专注于开发一部分业务,敏捷开发的核心理念就是既然无法充分了解超高业务流量下的用户的真实需求是怎样的,就将一个大的目标不断拆解,把它变成一个个可交付的小目标、小项目,然后通过不断迭代,以小步快跑的方式持续开发

此外,这个时候项目是非常大的,为保证项目质量,测试环节不可减少,为了加快速度增大开发效率,测试的工作最好是和开发同步交替进行的,需要将测试环节从后面注入到整个开发环节当中,每次可交付的都是一个可用的功能集合,对开发交付的内容进行持续验证。这样开发产品的可控性也更强,可以阶段性的检验一下项目成果。

多机器问题

之前机器很少架构简单的时候,开发就可以干运维的活,就算加了几台服务器,那也是脚本将 jar包 发布到这些机器上,好像也挺简单,但是会有两个人同时上线部署被覆盖的问题,但这些都不是问题,只要约定好错开时间进行上线部署就可以了。

但你如果是几千台服务器起步,那就需要专门的运维人员进行维护项目了,因为开发分工每个人都专注于自己的事情,不会那么用心进行维护,另一方面是运维的学习成本确实变高了,开发人质量参差不齐,如果服务器出问题那就不是小事。

但是这个时候也不是 DevOps,而是 Dev+Ops,还没有融合在一起。这时 Ops 的主要职责就是:硬件维护、网络设备维护、DBA 、基础服务维护、数据监控等,运维们擅长写各种部署,监控脚本,减少机械的重复工作,开发模式变成了敏捷开发模式。

这个时候,开发设计流程大致是这样。

到这里了,还没有引入到DevOps,还要先再插入讲讲微服务,才能更好的说明DevOps到底怎么理解。

微服务

微服务是什么

微服务(Microservices)是一种软件架构,它是以专注于单一责任与功能的小型功能区块 (Small Building Blocks) 为基础,利用模块化的方式组合出复杂的大型应用程序,各功能区块使用与语言无关 (Language-Independent/Language agnostic)的api集相互通信。

微服务的出现就是因为原来单体应用架构已经无法满足当前互联网产品的技术需求。

那么,到底什么样的服务才能算是微服务?
1、单一职责的。一个微服务应该都是单一职责的,这才是“微”的体现,一个微服务解决一个业务问题(注意是一个业务问题而不是一个接口)。
2、面向服务的。将自己的业务能力封装并对外提供服务,这是继承SOA的核心思想,一个微服务本身也可能使用到其它微服务的能力。
(有点像SOA的演进)

微服务架构

微服务架构,核心是为了解决应用微服务化之后的服务治理问题。

应用微服务化之后,首先遇到的第一个问题就是服务发现问题,一个微服务如何发现其他微服务呢?最简单的方式就是每个微服务里面配置其他微服务的地址,但是当微服务数量众多的时候,这样做明显不现实。所以需要使用到微服务架构中的一个最重要的组件:服务注册中心,所有服务都注册到服务注册中心,同时也可以从服务注册中心获取当前可用的服务清单:


解决服务发现问题后,接着需要解决微服务分布式部署带来的第二个问题:服务配置管理的问题。当服务数量超过一定程度之后,如果需要在每个服务里面分别维护每一个服务的配置文件,运维人员估计要哭了。那么,就需要用到微服务架构里面第二个重要的组件:配置中心,微服务架构就变成下面这样了:

以上应用内部的服务治理,当客户端或外部应用调用服务的时候怎么处理呢?服务A可能有多个节点,服务A、服务B和服务C的服务地址都不同,服务授权验证在哪里做?这时,就需要使用到服务网关提供统一的服务入口,最终形成典型微服务架构:

上面是一个典型的微服务架构,当然微服务的服务治理还涉及很多内容,比如:

1、通过熔断、限流等机制保证高可用
2、微服务之间调用的负载均衡;
3、分布式事务(2PC、3PC、TCC、LCN等);
4、服务调用链跟踪等等。

主流的微服务框架

目前国内企业使用的微服务框架主要是spring clouddubbo(或者DubboX),spring Cloud已经逐渐成为主流,比较两个框架的优劣势的文章在网上有很多,这里就不重复了,选择什么框架还是按业务需求来吧,业务框架决定技术框架。

Spring Cloud全家桶提供了各种各样的组件,基本可以覆盖微服务的服务治理的方方面面,以下列出了Spring Cloud一些常用组件:

DevOps+微服务:拆分解耦

了解完上述全部之后,假设当原本是单体架构的公司发展到非常大规模的时候,会有很多程序员、服务器等等,所以一个项目里面,什么语言、技术栈都会有,Java、Gopython肯定是数不胜数的,所以,这个时候需要协调技术栈,并且项目后期肯定会变得非常大,全部都兑到一个项目里,最直接的后果就是项目变得很大,上线项目启动时间变长,一个BUG可能导致整个业务全线崩溃,最终的后果就是项目变得越来越难以维护,加一个改一个东西几乎搞不动,而且还越来越难重构。

所以,拆分解耦是最终的出路,将项目拆成一个个小的服务单独部署,以电商项目为例,将整个项目拆分为用户服务、商品服务、订单服务,积分服务、支付服务每个服务单独部署,之间通过互相调用的方式来交互,而且可以将一些基础服务例如上传图片,发送短信等很多服务都需要的基础服务,抽象到一个单独的整合服务,也就是之前所谓的中台服务

拆分解耦演化催生DevOps

按照上述说的微服务架构进行开发DevOps的话,运维需要做的上线工作,主要就是将代码部署到对应的机器里面,微服务有那么多的服务,每个大点的公司几百个服务不算多,而且还可能随时搞一个服务出来,如果还按照原始的脚本部署方式,可能最后连是哪个脚本都找不到。而且,如果每个服务上线都需要运维来同意,开发会非常难受,需要天天找运维同意发布,运维也会增加繁琐的工作量。

所以,开始演化出远程部署一些机器,专门用来管理代码,进行上线工作,由运维事先把上线的规则都给定义好了,开发只要按照他的规则都访问这台服务器进行各自的代码合成和发布,自己上线呢,能用代码自动完成的事情就绝不要手动解决,这是每个开发人员都在想的东西。运维需要做的事情,慢慢的都沉淀到了各个平台上面,例如监控,有专门的监控组件和可视化,基础服务例如服务器,CDN,负载均衡等基础服务可以外包到云服务厂商,日志也有专门的日志工具,链路追踪也有专门的组件和可视化,还有网关等,渐渐的,只要这些都配置好了,开发也可以做运维的部分工作,毕竟开发才是最了解代码的人,哪里出了问题看看监控日志,可以最快速度定位到问题,于是DevOps开发模式诞生了,开发也是运维。

早期的DevOps,大部分指的都是“开发运维一体化”。

而现在的DevOps,概念上已经扩大到端到端的概念了。

实现DevOps:DevOps搭建工具

综上所示:DevOps 的三大支柱之中,即人(People)、流程(Process)和平台(PlatfORM)。

项目管理(PM):Jira。运营可以上去提问题,可以看到各个问题的完整的工作流,待解决未解决等;
代码管理:Gitlabjenkins或者k8s都可以集成gitlab,进行代码管理,上线,回滚等;
持续集成CI(Continuous Integration):gitlab ci。开发人员提交了新代码之后,立刻进行构建、(单元)测试。根据测试结果,我们可以确定新代码和原有代码能否正确地集成在一起。
持续交付CD(Continuous Delivery):gitlab cd。完成单元测试后,可以把代码部署到连接数据库的 Staging 环境中更多的测试。如果代码没有问题,可以继续手动部署到生产环境中。
镜像仓库:VMware Harbor,私服nexus。
容器Docker
编排:K8S。
服务治理:Consul。
脚本语言Python
日志管理:Cat+Sentry,还有种常用的是elk
系统监控prometheus
负载均衡Nginx
网关:Kong,zuul。
链路追踪:Zipkin。
产品和UI图:蓝湖。

参考文章:
1、知乎:什么是DevOps? 作者:小龙飞
2、知乎:微服务入门 作者:未知

到此这篇关于深入理解DevOps+微服务的文章就介绍到这了,更多相关DevOps 微服务内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: 深入理解DevOps+微服务框架

本文链接: https://www.lsjlt.com/news/150215.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • 深入理解DevOps+微服务框架
    单体架构 单体架构是什么 在搞懂DevOps和微服务之前,需要先搞懂什么是单体应用/单体架构。简单来说,就跟在校的一些小项目一样,项目的Demo写好了,找一台服务器安装环境,然后把j...
    99+
    2022-11-13
  • JavaEE微框架Spring Boot深入解读
    前言spring框架作为JavaEE框架领域的一款重要的开源框架,在企业应用开发中有着很重要的作用,同时Spring框架及其子框架很多,所以知识量很广。Spring Boot:一款Spring框架的子框架,也可以叫微框架,是2014年推出的...
    99+
    2023-05-31
    spring boot javaee
  • 如何理解微服务与DevOps
    本篇内容介绍了“如何理解微服务与DevOps”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!微服务与DevO...
    99+
    2022-10-19
  • 怎么理解Java微服务框架
    本篇内容主要讲解“怎么理解Java微服务框架”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“怎么理解Java微服务框架”吧!  1、微服务哪些框架  1)Dubbo,是阿里巴巴服务化治理的核心框架...
    99+
    2023-06-02
  • React框架核心原理全面深入解析
    目录前言第一章 基本概念第二章 createElement 函数第三章 render函数第四章 Concurrent Mode第五章 Fibers第六章 Render and Com...
    99+
    2022-11-16
    React框架的原理 React框架核心
  • 深入理解框架背后的原理及源码分析
    目录问题1问题2总结近期团队中同学遇到几个问题,想在这儿跟大家分享一波,虽说不是很有难度,但是背后也折射出一些问题,值得思考。 开始之前先简单介绍一下我所在团队的技术栈,基于这个背景...
    99+
    2022-11-13
  • 大神告诉你如何理解微服务框架
    因为Martin Fowler和Chris Richardson两位大神的布道,及NetFlix和Amazon公司的实践,国内对于微服务的一些基础问题理解基本一致,但受限于自身单体应用的限制,过度到微服务架构,又要各想办法,具体问...
    99+
    2023-06-03
  • 深入理解Gogin框架中Context的Request和Writer对象
    目录背景Context对象的初始化Context.Request对象Context.Writer对象总结背景 在使用gin框架时,我们定义的请求处理器,输入参数总是一个gin.Con...
    99+
    2023-05-17
    Go gin框架Context Request对象 Go gin框架Context Writer对象 Go gin框架Context Go gin框架
  • 如何理解微服务架构
    因为Martin Fowler和Chris Richardson两位大神的布道,及NetFlix和Amazon公司的实践,国内对于微服务的一些基础问题理解基本一致,但受限于自身单体应用的限制,过度到微服务架构,又要各想办法,具体问...
    99+
    2023-06-05
  • 阿里架构师:带你快速理解微服务架构,理解微服务架构的核心
    什么是微服务首先微服务并没有一个官方的定义,想要直接描述微服务比较困难,我们可以通过对比传统WEB应用,来理解什么是微服务。传统的WEB应用核心分为业务逻辑、适配器以及API或通过UI访问的WEB界面。业务逻辑定义业务流程、业务规则以及领域...
    99+
    2023-06-04
  • 深入理解JavaScript中的宏任务和微任务机制
    目录引入宏任务与微任务引入 // 开启一个定时器 1秒后执行 setTimeout( () => { console.log(1) }, 1000) console.l...
    99+
    2023-05-18
    JavaScript宏任务 JavaScript微任务
  • 深入浅出讲解Spring框架中AOP及动态代理的应用
    目录一. Spring AOP1. 传统问题:2. 问题的解决策略:3. AOP优点: 二. 动态代理1. JDK动态代理2. CGLIB代理一. Spring AOP &...
    99+
    2022-11-13
  • 如何理解Spring Cloud微服务架构
    这篇文章主要讲解了“如何理解Spring Cloud微服务架构”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“如何理解Spring Cloud微服务架构”吧!...
    99+
    2022-10-19
  • 深入理解阿里云服务器WCS
    本文将深入介绍阿里云服务器WCS(Web Container Service)的基本概念、特点、优势以及如何使用它。 随着互联网的不断发展,Web应用的复杂度和规模也在不断提高。为了满足日益增长的Web应用需求,云服务已经成为主流。阿里云服...
    99+
    2023-11-12
    阿里 服务器 WCS
  • 详解Go语言微服务开发框架之Go chassis
    目录引言架构获取配置配置项形态配置运行时热加载例子引言 https://github.com/go-chassis/go-chassis是一个微服务开发框架,而微服务开发框架带来的其...
    99+
    2022-11-12
  • Go微服务开发框架DMicro设计思路详解
    目录背景概述架构设计理念面向接口设计会话 Session消息 Message协议 Proto编码 Codec连接 Socket有机的组合插件 Plugin组件未来展望背景 ...
    99+
    2022-11-11
  • 浅试仿 mapstruct实现微服务编排框架详解
    目录微服务编排框架开发背景接口的方式通过注解的方式书写代码方式的选择方案选择feignMapStruct方案总结Feign @FeignClientMapStruct微服务编排框架 ...
    99+
    2022-11-13
  • 【SpringCloud】深入探究Eureka:构建微服务架构中的高效服务发现系统
    👨‍💻博主主页:小尘要自信 在现代的软件开发中,微服务架构已经成为了一个热门的话题。微服务架构的一个关键组成部分就是服务发现。而在服务发现领域,Eureka无疑是...
    99+
    2023-09-07
    spring cloud eureka 微服务 java 后端
  • WCF框架服务模型怎么理解
    本篇内容介绍了“WCF框架服务模型怎么理解”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!下面我们将会从WCF框架各个功能出发,来讲述WCF该...
    99+
    2023-06-17
  • 深入理解阿里云服务器协议
    阿里云服务器协议是阿里云为了提供稳定、安全、高效的服务器资源而制定的一系列协议,包括但不限于SLB(负载均衡)、DNS(域名解析)、HTTP/HTTPS协议、SSL/TLS协议等。本文将深入理解这些协议,并探讨它们如何在阿里云服务器上协同工...
    99+
    2023-11-02
    阿里 协议 服务器
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作