【Linux】Jenkins Pipeline流水线详解及基于Jenkins流水线实现自动更新项目(实战)

本文主要是介绍【Linux】Jenkins Pipeline流水线详解及基于Jenkins流水线实现自动更新项目(实战),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在这里插入图片描述

👨‍🎓博主简介

  🏅CSDN博客专家
  🏅云计算领域优质创作者
  🏅华为云开发者社区专家博主
  🏅阿里云开发者社区专家博主
💊交流社区:运维交流社区 欢迎大家的加入!
🐋 希望大家多多支持,我们一起进步!😄
🎉如果文章对你有帮助的话,欢迎 点赞 👍🏻 评论 💬 收藏 ⭐️ 加关注+💗


文章目录

  • 一、Pipeline 流水线的简介
    • 1.1 什么是Jenkins的流水线?
    • 1.2 Pipeline中几个重要概念:
    • 1.3 Pipeline优势
  • 二、Pipeline流水线 简单的构建
    • 2.1 jenkinsfile 必备的五个组成部分
    • 2.2 Jenkins 上创建一个 Pipeline 流水线任务
      • 2.2.1 Jenkins 上安装Blue Ocean插件
      • 2.2.2 新建一个 Pipeline 任务
      • 2.2.3 编辑流水线
      • 2.2.4 保存并构建流水线
  • 三、Pipeline流水线 声明式语法解析
  • 四、【进阶】基于Pipeline 流水线实现项目的更新
    • 4.1 熟悉项目更新流程
    • 4.2 基于上面创建的Pipeline流水线任务修改(可自行重新创建)
    • 4.3 保存并构建流水线
    • 4.5 查看服务是否正常
  • 五、相关专栏
  • 六、相关文章

  之前采用Jenkins的自由风格构建的项目,每个步骤流程都要通过不同的方式设置,并且构建过程中整体流程是不可见的,无法确认每个流程花费的时间,并且问题不方便定位问题。

  Jenkins的Pipeline可以让项目的发布整体流程可视化,明确执行的阶段,可以快速的定位问题。并且整个项目的生命周期可以通过一个Jenkinsfile文件管理,而且Jenkinsfile文件是可以放在项目中维护的。

所以Pipeline相对自由风格或者其他的项目风格更容易操作。

  pipline是帮助Jenkins实现CI到CD转变的重要角色,是运行在jenkins2.X版本的核心插件,简单来说Pipline就是一套运行于Jenkins上的工作流框架,将原本独立运行于单个或者多个节点的任务连接起来,实现单个任务难以完成的复杂发布流程,从而实现单个任务很难实现的复杂流程编排和任务可视化。

一、Pipeline 流水线的简介

1.1 什么是Jenkins的流水线?

Jenkins的流水线(Pipeline)是一套插件,用于实现和集成持续交付流水线到Jenkins。流水线可以自动表达从版本控制向用户和客户获取软件的进程。具体来说,软件的每次变更(在源代码控制中提交)在被释放的路上都会经历一个复杂的过程,这个过程包括以一种可靠且可重复的方式构建软件,并通过多个测试和部署阶段来开发构建好的软件。

对Jenkins流水线的定义被写在一个文本文件中(称为Jenkinsfile),该文件可以被提交到项目的源代码控制仓库,这是“流水线即代码”的基础。将CD流水线作为应用程序的一部分,像其他代码一样进行版本化和审查。 创建 Jenkinsfile并提交它到源代码控制中提供了一些即时的好处:

  • 自动地为所有分支创建流水线构建过程并拉取请求。
  • 在流水线上代码复查/迭代 (以及剩余的源代码)。
  • 对流水线进行审计跟踪。
  • 该流水线的真正的源代码, 可以被项目的多个成员查看和编辑。

While定义流水线的语法, 无论是在 web UI 还是在 Jenkinsfile 中都是相同的, 通常认为在Jenkinsfile 中定义并检查源代码控制是最佳实践。

1.2 Pipeline中几个重要概念:

  • pipeline 流水线是用户定义的一个CD流水线模型 。流水线的代码定义了整个的构建过程, 他通常包括构建, 测试和交付应用程序的阶段 。
    pipeline 块声明式流水线语法的关键部分
  • Stage:阶段,一个pipeline可以划分为若干个stage,每个stage都是一个操作步骤,比如clone代码、代码编译、代码测试和代码部署,阶段是一个逻辑分组,可以跨多个node执行。
  • Node:节点,每个node都是一个jenkins节点,可以是jenkins master也可以是jenkins agent,node是执行step的具体服务器。另外, node块是 脚本化流水线语法的关键部分
  • Step:步骤,step是jenkins pipeline最基本的操作单元,从在服务器创建目录到构建容器镜像,由各类Jenkins插件提供实现,一个stage中可以有多个step,例如:sh “make”

1.3 Pipeline优势

  • 可持续性:jenkins的重启或者中断后不影响已经执行的pipeline Job
  • 支持暂停:pipeline可以选择停止并等待人工输入或批准后再继续执行
  • 可扩展:通过groovy的编程更容易的扩展插件
  • 并行执行:通过groovy脚本可以实现step,stage间的并行执行,和更复杂的相互依赖关系。

二、Pipeline流水线 简单的构建

流水线既能作为任务的本身,也能作为Jenkinsfile,其类似于dockerfile(将启动docker的所有命令,打包成一个文件)

Jenkins的web-ui所做的操作,也可以落地到Jenkinsfile里面,与dockerfile类似去开发

使用流水线可以让我们的任务从ui手动操作,转换为代码化,像docker的dockerfile一样,从shell命令到配置文件,更适合大型项目,可以让团队其他开发者同时参与进来,同时也可以编辑开发Jenkinswebui不能完成的更复杂的构建逻辑,作为开发者可读性也更好。

2.1 jenkinsfile 必备的五个组成部分

Jenkinsfile·有5个必备的组成部分

语法解析
pipeline整条流水线
agent指定执行器(也就是你要在哪台服务器上执行)
stages所有阶段(只有一个,下面为stage)
stage某一阶段(可有多个,下面为steps)
steps阶段内的每一步,可执行命令(可执行多条命令)

2.2 Jenkins 上创建一个 Pipeline 流水线任务

2.2.1 Jenkins 上安装Blue Ocean插件

找到插件商场;

Manage Jenkins --> Plugins --> 点击Available plugins :搜索Blue Ocean --> 点击安装

在这里插入图片描述

在这里插入图片描述

因为我这里已经安装了,就从installed里面截图了。找到Blue Ocean点击安装。

在这里插入图片描述

在这里插入图片描述

等待安装完重启jenkins;重启完之后就可以在首页中的左侧看到打开Blue Ocean了;

在这里插入图片描述

然后我们新建一个流水线任务;

2.2.2 新建一个 Pipeline 任务

点击新建Item – > 选中Pipeline,输入一个任务名称;

在这里插入图片描述

自己定义一下描述即可;

在这里插入图片描述

2.2.3 编辑流水线

鉴于对新手不太友好,我们这里先看看,然后使用Hello World脚本生成;生成Groovy脚本;

在这里插入图片描述

默认会生成一个Hello World脚本,可以看到应用到了上面说的Jenkinsfile必备的五个组成部分;其他的就可以自行添加了,我们先来测试;

2.2.4 保存并构建流水线

  • 直接点击保存 --> 然后build构建

在这里插入图片描述

在这里插入图片描述

点击构建的时候会在左下角的构建历史展示,如果没有刷新一下页面就可以了;直接点击进去再去找Console Output控制台输出或者是直接鼠标停留点击尖角号,再点击Console Output查看控制台输出。

在这里插入图片描述

SUCCESS表示执行完成,没有报错:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

我们执行完也可以看一下阶段视图

在这里插入图片描述

这样一个简单的流水线就构建成功了,可视化我们可以点击左侧的 打开Blue Ocean,就可以看到刚刚执行的流程;

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

这样就可以看到可视化执行过程了,当然因为这个是只有一个stage所以看着不是很清晰,后面我们会添加更多的stage,这时候的可视化过程就发挥到了他的作用了。

三、Pipeline流水线 声明式语法解析

可参考:

【Jenkins】Pipeline流水线语法解析全集 – 声明式流水线

【Jenkins】Pipeline流水线语法解析全集 – 脚本式流水线、groovy语法

四、【进阶】基于Pipeline 流水线实现项目的更新

4.1 熟悉项目更新流程

熟悉项目更新流程:就是我们在服务器上是怎么更新的,那么我们在这就先写好更新的流程;

例如:我们更新服务里的某一个文件使用的容器方式,那么步骤就是:

1、复制文件到一个目录下;

2、备份之前的文件;

3、将复制的文件放到服务所需的目录下;

4、重启服务容器;

5、直接在容器外执行指定容器内命令启动服务;

6、测试(可使用脚本进行测试返回一个值,也可以自己再页面测试)

以上就是整体更新的流程了,那么我们可以写5个 – 6个stage:看以下部分:

pipeline {agent {label '224'}environment {Container_wai = '/home/lcy/'Container_nei = '/application/'}stages {stage('copy_file') {	// 复制文件到服务器上steps {}}stage('backup_file') {	// 备份要更新的文件steps {}}stage('mv_file') {	// 将新上传的文件复制到项目所需的路径下steps {}}stage('restart_container') {	// 重启容器steps {}}stage('start_service') {	// 启动服务steps {}}}
}

解析:

agent {label '224'
}

在node为224的服务器上执行此操作,224为添加node时自定义的名字,具体如何添加node,可查看:【Jenkins】Pipeline流水线语法解析全集 – 声明式流水线 中的如何创建一个node节点。


environment:为配置的环境变量,这里我们配置的是文件上传的路径的和文件要更新的路径;

下面就是一个大的stages下分别有多个stage,一个stage代表一个操作,便于排查问题;一个stage下有一个steps,steps内可以写具体要执行的操作;

大概流程写完之后,我们就可以在steps中写具体操作了;

4.2 基于上面创建的Pipeline流水线任务修改(可自行重新创建)

这里我们没有项目在git上,所以跳过git那一步,从本机往目标服务器拉取文件;

目标服务器记得做免密,一般在配置node节点的时候就会做免密;

pipeline {agent {label '224'}environment {file_Path = '/home/lcy/'Container_wai = '/home/lcy/V1.0'Container_nei = '/application/'file_Name = 'cs.py'}stages {stage('copy_file') {agent {label 'localhost'}steps {script {def sourcePath = "/root/${file_Name}"def targetNode = '172.11.11.224'sh "scp ${sourcePath} root@${targetNode}:${file_Path}/"sh 'if [ $? -eq 0 ];then echo \'成功\'; else echo \'失败\'; fi'}}}stage('backup_file') {steps {sh "mv ${Container_wai}/${file_Name} ${Container_wai}/${file_Name}-`date +%Y-%m-%d`"echo "备份要更新的文件"}}stage('mv_file') {steps {sh "mv ${file_Path}/${file_Name} ${Container_wai}/ && chmod 775 ${Container_wai}/${file_Name}"echo '将新上传的文件复制到项目所需的路径下'}}stage('restart_container') {steps {sh "docker restart test"echo '重启容器'}}stage('start_service') {steps {sh "docker exec -i test /bin/bash -c 'sh start.sh'"echo '启动服务'}post {always {emailext(to: "********@qq.com",subject: "执行成功通知: " + currentBuild.fullDisplayName,body: """<h2>Build Result: ${currentBuild.result}</h2> <p>Full Display Name: ${currentBuild.fullDisplayName}</p> <p>URL: ${currentBuild.absoluteUrl} </p><p>Change: ${currentBuild.changeSets}</p><p>user: </p>""")}}}}
}

解析:

image-20240312162945962

4.3 保存并构建流水线

image-20240312163333547

  • 跑完也可以查看阶段视图:项目 --> 状态

在这里插入图片描述

4.5 查看服务是否正常

image-20240312163254879

这个是执行完发送的邮件,具体服务是否正常,需要根据自己的服务类型去判断;也可自行添加调用,判别服务是否正常。


自此,流水线自动更新服务就完成了!!!

五、相关专栏

专栏名称专栏地址
《Jenkins》https://blog.csdn.net/liu_chen_yang/category_12493057.html
《自动化运维》https://blog.csdn.net/liu_chen_yang/category_12473478.html
《Linux从入门到精通》https://blog.csdn.net/liu_chen_yang/category_10887074.html

六、相关文章

文章名称文章链接
【Jenkins】Pipeline流水线语法解析全集 – 声明式流水线https://liucy.blog.csdn.net/article/details/136528857
【Jenkins】Pipeline流水线语法解析全集 – 脚本式流水线、groovy语法https://liucy.blog.csdn.net/article/details/136567517
【Linux】Jenkins Pipeline流水线详解及基于Jenkins流水线实现自动更新项目https://liucy.blog.csdn.net/article/details/136656568

这篇关于【Linux】Jenkins Pipeline流水线详解及基于Jenkins流水线实现自动更新项目(实战)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1071897

相关文章

网页解析 lxml 库--实战

lxml库使用流程 lxml 是 Python 的第三方解析库,完全使用 Python 语言编写,它对 XPath表达式提供了良好的支 持,因此能够了高效地解析 HTML/XML 文档。本节讲解如何通过 lxml 库解析 HTML 文档。 pip install lxml lxm| 库提供了一个 etree 模块,该模块专门用来解析 HTML/XML 文档,下面来介绍一下 lxml 库

Spring Security基于数据库验证流程详解

Spring Security 校验流程图 相关解释说明(认真看哦) AbstractAuthenticationProcessingFilter 抽象类 /*** 调用 #requiresAuthentication(HttpServletRequest, HttpServletResponse) 决定是否需要进行验证操作。* 如果需要验证,则会调用 #attemptAuthentica

这15个Vue指令,让你的项目开发爽到爆

1. V-Hotkey 仓库地址: github.com/Dafrok/v-ho… Demo: 戳这里 https://dafrok.github.io/v-hotkey 安装: npm install --save v-hotkey 这个指令可以给组件绑定一个或多个快捷键。你想要通过按下 Escape 键后隐藏某个组件,按住 Control 和回车键再显示它吗?小菜一碟: <template

如何用Docker运行Django项目

本章教程,介绍如何用Docker创建一个Django,并运行能够访问。 一、拉取镜像 这里我们使用python3.11版本的docker镜像 docker pull python:3.11 二、运行容器 这里我们将容器内部的8080端口,映射到宿主机的80端口上。 docker run -itd --name python311 -p

linux-基础知识3

打包和压缩 zip 安装zip软件包 yum -y install zip unzip 压缩打包命令: zip -q -r -d -u 压缩包文件名 目录和文件名列表 -q:不显示命令执行过程-r:递归处理,打包各级子目录和文件-u:把文件增加/替换到压缩包中-d:从压缩包中删除指定的文件 解压:unzip 压缩包名 打包文件 把压缩包从服务器下载到本地 把压缩包上传到服务器(zip

hdu1043(八数码问题,广搜 + hash(实现状态压缩) )

利用康拓展开将一个排列映射成一个自然数,然后就变成了普通的广搜题。 #include<iostream>#include<algorithm>#include<string>#include<stack>#include<queue>#include<map>#include<stdio.h>#include<stdlib.h>#include<ctype.h>#inclu

性能分析之MySQL索引实战案例

文章目录 一、前言二、准备三、MySQL索引优化四、MySQL 索引知识回顾五、总结 一、前言 在上一讲性能工具之 JProfiler 简单登录案例分析实战中已经发现SQL没有建立索引问题,本文将一起从代码层去分析为什么没有建立索引? 开源ERP项目地址:https://gitee.com/jishenghua/JSH_ERP 二、准备 打开IDEA找到登录请求资源路径位置

OpenHarmony鸿蒙开发( Beta5.0)无感配网详解

1、简介 无感配网是指在设备联网过程中无需输入热点相关账号信息,即可快速实现设备配网,是一种兼顾高效性、可靠性和安全性的配网方式。 2、配网原理 2.1 通信原理 手机和智能设备之间的信息传递,利用特有的NAN协议实现。利用手机和智能设备之间的WiFi 感知订阅、发布能力,实现了数字管家应用和设备之间的发现。在完成设备间的认证和响应后,即可发送相关配网数据。同时还支持与常规Sof

【C++】_list常用方法解析及模拟实现

相信自己的力量,只要对自己始终保持信心,尽自己最大努力去完成任何事,就算事情最终结果是失败了,努力了也不留遗憾。💓💓💓 目录   ✨说在前面 🍋知识点一:什么是list? •🌰1.list的定义 •🌰2.list的基本特性 •🌰3.常用接口介绍 🍋知识点二:list常用接口 •🌰1.默认成员函数 🔥构造函数(⭐) 🔥析构函数 •🌰2.list对象