四件简单的事情,帮助改善部署过程

2023-11-20 17:10

本文主要是介绍四件简单的事情,帮助改善部署过程,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在所有更改中,某些内容保持不变。这些问题是,我们如何以最小的工作量和无中断的方式将代码部署到生产中。其次,我们如何知道服务是否正常运行,是处于运行状态还是处于关闭状态,如果我们配置正确,服务是否按预期运行呢?

以下是可以在任何环境中完成的四件简单的事情,以帮助改善部署过程。这些将使您获得更好的见解和信心,使您的应用程序正确运行和配置。

  1. 应用程序运行状况检查

  2. 事件注释

  3. Pod:尽量减少影响

  4. 蓝绿部署

应用程序运行状况检查

改善应用程序的部署和管理的第一步是了解您的应用程序是否运行正常(正在运行并能够执行其预期任务),可以与下游服务进行对话并运行正确的版本。显然,监控是至关重要的,但是我们的监视方式是将其用于自动化部署的关键。在我工作过的所有地方,我们都对应用程序和数据库进行了某种形式的监控,但并非所有人都进行了应用程序运行状况检查。

最近,在Kountable,我们在所有应用程序上都设置了*/public/health点。此健康检查将告诉我们有关应用程序的信息。首先,应用程序是否正常运行*(已启动并准备就绪)。其次,应用程序正在运行什么版本的代码(commit)。第三,应用程序正常运行时间,最后是connection_status。该connnection_status告诉我们,应用程序是否可以连接数据库或下游服务。如果不能,那么我们可以查看这是网络问题,密码问题还是下游服务离线的问题?这有助于缩短应用程序故障时的时间和关注范围。这是一个运行状况检查输出示例。

{
"healthy": true,
"commit": "1e98e46",
"uptime": "05:22:47:21",
"connection_status": true
}

此运行状况检查不仅可以用来监视服务,还可以用作部署过程的一部分。运行状况检查可用于在蓝绿色部署期间验证安装的版本(commit)以及运行状况和连接状态。如果所有这些都通过,再加上其他综合测试,我们可以自动将该部署升级为生产。

在此设置的早期,我们已将运行状况检查失败的服务部署到AWS ECS。提交ID与要部署的ID不匹配。如果您已运行ECS服务,则知道AWS可以出色地完成工作,允许您以对当前正在运行的服务影响最小的方式部署ECS任务的新版本。ECS将启动新任务,验证目标组中配置的运行状况检查终端节点,并且只有当它通过时,它才会耗尽旧任务并启用新服务。过去,我多次看到部署了新的ECS任务,然后始终处于启动和失败的循环中。任务部署上没有AWS错误。唯一的选择是查看CloudWatch日志,您会看到您的服务每分钟启动和停止。可能要花一些时间

通过具有提交ID或版本的应用程序运行状况检查,以及进行蓝绿色部署,我们能够捕获部署失败。部署工具对要部署的提交ID和运行状况检查提交ID进行了验证。当它们不匹配时,部署将停止。这一简单的设置节省了30多分钟的时间来确定问题,并避免了问题投入生产。

事件注释

我一遍又一遍地看到的一个趋势是,当对系统,应用程序或环境没有任何更改时,几乎没有任何问题或中断。当我在Apigee工作时,早期的时候,我们的客户增长很快,并且代码不断发布。在快速开发和持续部署的这段时间内,我们将在生产应用程序中遇到很多问题。在安静的时期,当没有生产部署时,问题将几乎消失或几乎没有。

在不断变化的环境中,很难跟踪所有变化。发生变更时,需要花费一些时间来缩小范围,尤其是随着时间的推移以及在全球范围内推出变更时。我发现易于实现且非常有帮助的一件事是记录更改事件并将该事件添加到您的监控系统。使用部署工具轻松完成此操作,以使用部署事件更新监控系统。

这是一个示例,其中我们最近部署了应用程序,响应时间立即增加。grafana批注标记部署时间,然后您会看到响应时间达到峰值。

除了帮助快速确定原因外,我还发现易于实施的任何部署过程或其他自动化过程的记录事件。我认为需要对环境的所有更改(从配置管理工具运行,修补,备份甚至非自动更改)进行更改。

我发现添加备份事件,通过将备份窗口覆盖到系统资源使用情况(CPU,内存等)而有所帮助。这是查看备份过程是否是导致CPU和内存高峰的罪魁祸首的快速简便的方法。

Pod:尽量减少影响

Pods的概念有许多不同的迭代,从数据中心设计,VMware Pods到Kubernetes Pods。Pod有多种使用或设计的方式。关键是设计应用程序和基础架构,以减少任何故障对部分组件,客户或服务的影响。

当我们在Apigee一起设计应用程序和基础结构时,我们实现了这个概念。从操作方面与Engineering一起工作,我们设计了多租户应用程序,以在2个或更多应用程序Pod上运行客户。对我们而言,Pod是一组应用程序服务,其中有1到X个客户分配给特定Pod。例如,您可能有用于核心应用程序的Pod,有另一个用于分析或日志记录的Pod。在AWS设置中,您可以按AWS区域拥有应用程序Pod,然后可以将客户分配给全球所有或几个区域中每个区域的Pod。其他示例包括Google的gmail如何基于用户的默认位置或FaceBook如何将新功能推出给部分用户。

如果由于云故障,部署问题或其他因素导致特定区域中的Pod出现问题。该问题的影响将仅隔离到该区域中该Pod上的客户。通常,将客户部署到多个区域后,他们将永远不会注意到该问题。

通过一起设计应用程序和基础架构,减少问题影响/爆炸半径的可能性越大,最终的结果就越好。

蓝绿部署


蓝绿部署使您可以运行两个不同版本的应用程序,而一个运行实时流量。您可以通过几种不同的方式进行设置。过去,我在ECS中运行过两个版本的应用程序,都指向同一个数据库。

您的应用程序和数据库需要向前和向后兼容。兼容性的关键是您的数据库架构更改。您需要确保将列删除延迟到两个版本都不需要它为止。

为了在v1.0.3或v1.0.5之间进行切换,AWS ALB设置了两个规则,一个规则用于蓝色,另一个规则用于绿色。ALB将侦听器规则从蓝色切换为绿色,然后耗尽所有旧的(蓝色)连接。

关于我们

泽阳,Certified Jenkins Engineer DevOps领域实践者。专注于企业级DevOps运维开发技术实践分享,主要以新Linux运维技术、DevOps技术课程为主。丰富的一线实战经验,课程追求实用性获得多数学员认可。课程内容均来源于企业应用,在这里既学习技术又能获取热门技能,欢迎您的到来!(微信ID: devopsvip)

DevOps流水线实践课程

????戳阅读原文,进入课堂

这篇关于四件简单的事情,帮助改善部署过程的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/396161

相关文章

ElasticSearch+Kibana通过Docker部署到Linux服务器中操作方法

《ElasticSearch+Kibana通过Docker部署到Linux服务器中操作方法》本文介绍了Elasticsearch的基本概念,包括文档和字段、索引和映射,还详细描述了如何通过Docker... 目录1、ElasticSearch概念2、ElasticSearch、Kibana和IK分词器部署

部署Vue项目到服务器后404错误的原因及解决方案

《部署Vue项目到服务器后404错误的原因及解决方案》文章介绍了Vue项目部署步骤以及404错误的解决方案,部署步骤包括构建项目、上传文件、配置Web服务器、重启Nginx和访问域名,404错误通常是... 目录一、vue项目部署步骤二、404错误原因及解决方案错误场景原因分析解决方案一、Vue项目部署步骤

JavaScript中的reduce方法执行过程、使用场景及进阶用法

《JavaScript中的reduce方法执行过程、使用场景及进阶用法》:本文主要介绍JavaScript中的reduce方法执行过程、使用场景及进阶用法的相关资料,reduce是JavaScri... 目录1. 什么是reduce2. reduce语法2.1 语法2.2 参数说明3. reduce执行过程

Linux流媒体服务器部署流程

《Linux流媒体服务器部署流程》文章详细介绍了流媒体服务器的部署步骤,包括更新系统、安装依赖组件、编译安装Nginx和RTMP模块、配置Nginx和FFmpeg,以及测试流媒体服务器的搭建... 目录流媒体服务器部署部署安装1.更新系统2.安装依赖组件3.解压4.编译安装(添加RTMP和openssl模块

C++初始化数组的几种常见方法(简单易懂)

《C++初始化数组的几种常见方法(简单易懂)》本文介绍了C++中数组的初始化方法,包括一维数组和二维数组的初始化,以及用new动态初始化数组,在C++11及以上版本中,还提供了使用std::array... 目录1、初始化一维数组1.1、使用列表初始化(推荐方式)1.2、初始化部分列表1.3、使用std::

0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型的操作流程

《0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeekR1模型的操作流程》DeepSeekR1模型凭借其强大的自然语言处理能力,在未来具有广阔的应用前景,有望在多个领域发... 目录0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型,3步搞定一个应

redis群集简单部署过程

《redis群集简单部署过程》文章介绍了Redis,一个高性能的键值存储系统,其支持多种数据结构和命令,它还讨论了Redis的服务器端架构、数据存储和获取、协议和命令、高可用性方案、缓存机制以及监控和... 目录Redis介绍1. 基本概念2. 服务器端3. 存储和获取数据4. 协议和命令5. 高可用性6.

Deepseek R1模型本地化部署+API接口调用详细教程(释放AI生产力)

《DeepseekR1模型本地化部署+API接口调用详细教程(释放AI生产力)》本文介绍了本地部署DeepSeekR1模型和通过API调用将其集成到VSCode中的过程,作者详细步骤展示了如何下载和... 目录前言一、deepseek R1模型与chatGPT o1系列模型对比二、本地部署步骤1.安装oll

nginx部署https网站的实现步骤(亲测)

《nginx部署https网站的实现步骤(亲测)》本文详细介绍了使用Nginx在保持与http服务兼容的情况下部署HTTPS,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值... 目录步骤 1:安装 Nginx步骤 2:获取 SSL 证书步骤 3:手动配置 Nginx步骤 4:测

PLsql Oracle 下载安装图文过程详解

《PLsqlOracle下载安装图文过程详解》PL/SQLDeveloper是一款用于开发Oracle数据库的集成开发环境,可以通过官网下载安装配置,并通过配置tnsnames.ora文件及环境变... 目录一、PL/SQL Developer 简介二、PL/SQL Developer 安装及配置详解1.下