百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

微服务架构实战:使用Jenkins实现自动化构建

wptr33 2024-11-17 02:41 27 浏览

使用Jenkins实现自动化构建

一个大型平台的微服务架构设计通常会产生很多项目工程,因此会有很多服务和应用需要部署,并且需要不断地迭代和更新,这是一个庞大的工程,所以我们需要借助自动化工具,实现各个微服务工程的CICD工作流程。

CICD是持续集成(Continuous Integration)和持续部署(Continuous Deployment)的总称,是指通过自动化的构建、测试和部署,实现软件产品可循环使用的快速交付流程。

Jenkins是一个基于Java开发的功能强大的自动化构建工具,并且有一个非常丰富的插件仓库,可以很好地扩充和丰富其本身的功能。因此,Jenkins是实现自动化构建的一个很不错的工具。

单击Jenkins首页上的Plugins选项,可以查看各种插件的介绍,如图15-1所示。

本章我们使用Jenkins,结合Maven、Docker、Selenium和JMeter等工具,建立一个可持续交付的自动化设施。

持续交付工作流程

从代码提交开始,建立一个包括自动测试和自动部署的持续交付工作流程如图15-2所示。

这个工作流程的步骤如下所示:

(1)开发者向GitLab提交代码。

(2)GitLab使用 WebHook通知Jenkins有代码更新。

(3)Jenkins 从节点(Slave)拉取代码,打包并构建镜像。

(4)Jenkins使用从节点上构建的镜像运行测试用例。

(5)如果测试(Test)通过,则将镜像推送到镜像仓库。

(6)Jenkins在应用服务器上进行更新部署。

(7)Jenkins将构建报告以邮件方式通知开发者。

在开发者向代码库提交代码之后,整个流程都是自动进行的。如果中间某个环节出现错误,则中止流程的执行,并将结果通知相关人员。提交的代码不仅包括应用程序,还包括构建镜像的脚本、测试用例的脚本和部署的编排脚本等。

其中,各个步骤的操作可以使用插件或直接在命令行中使用各种工具来完成。

例如,拉取项目代码会用到Git插件;打包项目会用到 Maven;构建镜像和应用部署可直接通过命令行使用Docker或docker-compose;集成测试可通过命令行执行由Selenium、JMeter等生成的脚本。

下面,我们通过一个简单的案例,演示和说明Jenkins 的使用方法。

Jenkins的安装

下面的安装过程以MacOS为例进行说明。

因为Jenkins需要JVM的支持,所以请确保机器上已经安装了JDK 1.8或以上版本。为了完成后面的自动化演示,请确保机器中已经安装了Maven、Git客户端和 Docker等。

打开Jenkins官网,进入下载页面,选择左边的LTS稳定版中的Mac OSX版本进行下载,如图15-3所示。

下载完成后,单击安装包“jenkins-2.89.1.pkg”开始安装。

安装过程比较简单,直接单击“继续”按钮,按提示使用系统推荐使用的插件即可。安装完成后,通过下列网址打开本地的Jenkins控制台:

http://localhost:8080

第一次打开后会看到如图15-4所示页面。

按图15-4的提示打开管理员密码文件,把密码复制并粘贴到密码输入框中,单击右下角的Continue 按钮。如果密码验证成功,则会提示读者创建一个操作员用户。在创建用户之后,即可登录Jenkins控制台。新用户登录的欢迎界面如图15-5所示。

Jenkins的基本配置

由于要用到Maven编译和打包,所以单击欢迎界面的“系统管理”→“全局工具配置”选项,如图15-6所示,打开“全局工具配置”对话框。

在“全局工具配置”对话框中单击“Maven安装”选项,配置一个名字,并设置Maven的安装路径,如图15-7所示。

单击图15-6中的“管理插件”选项,从弹出的对话框中单击“可选插件”选项,找到“Maven Invoker plugin”插件,勾选后单击“直接安装”按钮,如图15-8所示。

注意,在设置settings.xml配置中的repositys路径时,如果是在本机测试,则最好与IDEA的配置相同,这样打包时将不用再重新下载一次依赖包。

在Jenkins的命令行配置中,为了能够正常使用Docker 和 docker-compose,我们需要对Jenkins的系统权限进行设置。因为Jenkins 使用默认用户“jenkins”开启服务,所以权限设置就是为这个用户进行授权。

通过如下操作步骤,为“jenkins”用户设置一个免密码配置,这样,在Jenkins 的命令行配置中,就可以使用超级管理员的命令“sudo”了。

在MacOS的终端中,执行下列命令,切换到超级管理员root

输入root的密码:

appledeMacBook-Air:/ apples su
Password:

编辑“sudoers”,并找到如下所示信息:

sh-3.2# vi/etc/sudoers
# root and users in group wheel can run anything on any machine as any userroot
ALL = (ALL) ALL
%admin
ALL- (ALL) ALL

在上面信息的后面,参照root的权限设置,添加如下所示的配置并保存:

jenkins ALL=(ALL) NOPASSWD: ALL
%admin ALL=(ALL) NOPASSWD: ALL

使用“dscl”命令把“jenkins”用户加进 admin用户组中,这个命令等同于Linux操作系统中的“usermod”命令:

sh-3.2# dscl . -append /Groups/admin GroupMembership jenkins

至此,就完成了Jenkins的权限设置。

Jenkins的自动部署实例

为了演示Jenkins的使用,下面创建一个自动部署实例。

在这个实例中使用的是一个功能非常简单的项目,项目中只有一个主程序,代码如下所示

@SpringBootApplication@RestController
public class DemoApplication {
public static void main (String[] args){
SpringApplication.run(DemoApplication.class,args) ;
}
@RequestMapping (value = "/")public String index(){
return "Hello world! ";
}
}

应用启动后,打开首页将输出“Hello World!”。

下面介绍这个自动部署项目的实现过程。

创建任务

在Jenkins首页中单击“新建”选项,打开创建任务页,如图15-9所示。

输入任务名称“demo”,并选择“构建一个自由风格的软件项目”选项,单击“确定”按钮,即可创建一个空任务,如图15-10所示。

配置任务

在图15-10中,单击“源码管理”选项,显示如图15-11所示对话框。在图15-11中勾选“Git选项,在代码库的地址栏中输入“demo”项目的存放地址。

因为这是一个公开项目,所以不用设置访问项目的权限。如果是一个私有项目,则必须在图15-11的“Credentials”中配置对项目有存取权限的用户名和密码。

单击图15-11中的“构建触发器”选项,在“构建触发器”对话框中勾选“Poll SCM”选项,配置一个定时任务的日程表,如图15-12所示。

图15-12中的日程表“00 20***”,表示在每天的20:00点整执行任务构建。在本实例中不使用定时任务。

接下来,使用 Maven 配置项目的打包。单击“构建”选项,在“增加构建步骤”下拉列表中选择“Invoke top-level Maven targets”选项,如图15-13所示。

其中,在“Maven Version”中选择前面安装的Maven,在“Goals”中输人如下所示的打包命令:

clean package

配置创建镜像和部署的操作命令,这里会用到Dockerfile和 docker-compose.yml,这两个文件已经包含在项目工程的docker目录中。

Dockerfile 中的内容如下所示:
FROM java:8
VOLUME/tmp
ADDdemo-0.0.1-SNAPSHOT.jar app.jar
RUN bash 一c'touch /app.jar'EXPOSE8080
ENTRYPOINT
, "/app.jar"]
["java", "-Djava.security.egd=file:/dev/./urandom", "-jar

docker-compose.yml中的部署脚本如下所示:

demo:
build:ports:
"8888:8080"

单击“构建”选项,在“增加构建步骤”下拉列表中选择“Execute shell”选项,在“Command"中输入如下所示命令:

cd /Users/Shared/Jenkins/Home/workspace/demo /docker
cp -f ../target/demo-0.0.1-SNAPSHOT .jar
sudo /usr/local/bin/docker-compose down --rmi all
sudo /usr/local/bin/docker-compose up -d

这些命令与我们在主机上直接使用Docker等工具部署应用的命令相同,即先停止正在运行的容器,再删除容器和镜像,最后重新进行部署,如图15-14所示。

执行任务

当手动执行任务时,首先单击任务的名称,返回任务首页。然后在任务首页中单击左侧菜单中的“立即构建”选项即可,如图15-15所示。

在任务执行过程中,会在控制台中输出信息,一个完整的执行过程的输出日志如下所示

Started by user mr.csj
Building in workspace /Users/Shared/Jenkins/Home/workspace/demo>git rev-parse --is-inside-work-tree # timeout=10
Fetching changes from the remote Git repository
>git config remote.origin.url https://gitee.com/chenshaojian/demo.git #timeout=10
Fetching upstream changes from https://gitee.com/chenshaojian/demo.git>git --version # timeout=10
>git fetch --tags --progress https://gitee.com/chenshaojian/demo.git+refs/heads/* :refs/remotes/origin/*
>git rev-parse refs/remotes/origin/master^ { commit] # timeout=10
>git rev-parse refs/remotes/origin/origin/master"{ commit}# timeout=10Checking out Revision 1b0348a999cee3a1920b1b20576b54e58a50ab2
(refs/remotes/origin/master)
>git config core.sparsecheckout # timeout=10
>git checkout-f 1b0348a999cee3a1920b1b2c576b54e58a50ab2Commit message: "add docker-compose"
>git rev-list 8791f0a371ab67a83d1005197744475de5f177df # timeout=10[demo]$/Users/apple/apache-maven-3.5.0/bin/mvn clean package
[INFO]Scanning for projects. . .
[INFO]
[INFO]-------------
[INFO] Building demo 0.0.1-SNAPSHOT[INFO]
[INFO]
[INFO]--- maven-clean-plugin:2.6.1:clean (default-clean)& demo ---[INFO] Deleting /Users/Shared/Jenkins/Home/workspace/demo/target
[INFO]
[INFO] ---maven-resources-plugin:2.6:resources (default-resources)& demo -[INFO] Using 'UTF-8' encoding to copy filtered resources.
[INFO]Copying 1 resource
[INEO]Copying 0 resource[INFO]
[INFO] --- maven-compiler-plugin:3.1:compile (default-compile)  demo ---[ INFO] Changes detected - recompiling the module!
[INFO] Compiling 1 source file to
/Users/Shared/Jenkins/Home/workspace/demo/target/classes[INEO]
[INFO] --- maven-resources-plugin:2.6:testResources (default-testResources) edemo ---
[INFO] Using 'UTF-8'encoding to copy filtered resources.[INFO] skip non existing resourceDirectory
/Users/Shared/Jenkins/Home/workspace/demo/src/test/resources[INFO]
[INFO] --- maven-compiler-plugin:3.1:testCompile (default-testCompile)Cdemo
[INFO] Changes detected - recompiling the module!
[INFO] Compiling 1 source file to
/Users/Shared/Jenkins/Home/workspace/demo/target/test-classes[INEO]
[ INFO] ---maven-surefire-plugin:2.20:test (default-test) C demo ---[INFO] Tests are skipped.
[INFO]
[INFO] --- maven-jar-plugin:2.6:jar (default-jar) demo --[INFO] Building jar:
/Users/Shared/Jenkins/Home/workspace/demo/target/demo-0.0.1-SNAPSHOT.jar[INFO]
[INFO] --- spring-boot-maven-plugin:1.5.8.RELEA.SE:repackage (default)  demo
[INFO]
[INEO] BUILD SUCCESS[INFO]
[INFO]Total time: 5.095 s
[INFO] Finished at: 2017-10-30T16:18:18+08:00[INFO] Final Memory:29M/182M
[INFO]
[demo]$ /bin/sh -xe/Users/Shared/Jenkins/tmp/jenkins4696633078670494346.sh
+cd /Users/Shared/ Jenkins/Home/workspace/demo/docker+ cp -f ../target/demo-0.0.1-SNAPSHOT.jar .
+ sudo /usr/local/bin/docker-compose down --rmi allRemoving image docker_demo
Failed to remove image for service demo:404 Client Error: Not Found ("No suchimage: docker_demo: latest")
+ sudo /usr/local/bin/docker-compose up -dBuilding demo
Step 1/6 : FROM java: 8
--->d23bdf 5b1b1b
Step 2/6:VOLUME /tmp---> Using cache
--->64c36a425bbf
Step 3/6: ADD demo-0.0.1-SNAPSHOT.jar app.jar--->1788813d23d2
step 4/6:RUN bash-c 'touch /app.jar'---> Running in e4cfd4447b78
--->2c44a754963b
Removing intermediate container e4cfd4447b78Step 5/6 :EXPOSE 8080
---> Running in 95b96954618e---> 8bc53f642637
Removing intermediate container 95b96954618e
Step 6/6:ENTRYPOINT java-Djava.security.egd=file:/dev/./urandom-jar/app.:一-->Running in al92a418f4f1
--->3a27629ceba9
Removing intermediate container a192a4184f1Successfully built 3a27629ceba9
Successfully tagged docker demo: latest
Image for service demo was built because it did not already exist. To rebuithis image you must use `docker-compose build' or 'docker-compose up --buildCreating docker demo_1..
Creating docker_demo_1-[1A-[2K
Creating docker demo 1 ...一[ 32mdone-[Om--[1BFinished:sUCCESS

从控制台的输出日志中可以看到构建已经成功完成。这时,我们可以通过下面的网址打开应用运行的首页:

http://localhost:8888

从中可以看到我们预期的结果,即输出“Hello World!”,如图15-16所示。

在本节的输出日志中,有一个如下所示的错误提示:

+ sudo /usr/local /bin/docker-compose down --rmi allRemoving image docker demo
Failed to remove image for service demo:404 Client Error:Not Found ("No suchimage: docker demo: latest")

出现这个错误提示的原因是在第一次构建时,并不存在可以移除的镜像,但这并不影响整个构建过程的执行。

现在验证一下项目更新的自动化部署效果。首先将项目主程序的输出结果“Hello World ! ”改为“Hello Jerkins! ”,然后提交代码。完成之后,再在Jenkins 中单击“立即构建”选项,构建完成后,刷新访问应用的浏览器,即可看到如图15-17所示的效果。

再次查看控制台的输出日志,现在,移除镜像的命令已经不再显示错误,而是输出了如下所示的结果,表示已经停止了运行的容器,并移除了原来的容器和镜像:

+ sudo /usr/local/bin/docker-compose down--rmi all
Stopping docker demo 1 ...
-[1A-[2K
Stopping docker demo 1 ... -[32mdone-[ Om-[1BRemoving docker demo 1 ...
一-[1A[2K
Removing docker demo 1 ...-[32mdone-[ Om一[1BRemoving image docker demo

这里只是一个简单的自动部署的演示,在实际使用中,可以通过定时任务,或结合使用WebHook 的代码提交通知,实现自动部署。另外,还可以通过Selenium、JMeter等工具生成测试脚本,增加自动测试的功能。

小结

本章介绍了如何使用自动化构建工具Jenkins 设计持续交付的工作流程,并以一个简单的实例演示了自动部署的实现过程。在该实例中,我们使用Git进行代码拉取、使用 Maven进行程序打包、使用Docker进行镜像的创建和应用的更新与部署。从这个实例中可以看出Jenkins的强大的可扩展性。

通过对本章的学习,相信读者能够根据实际情况,建立一个完善的自动化基础设施,从而实现在微服务发布中集成测试和持续部署的自动化构建流程。

本文给大家讲解的内容是微服务架构实战:使用Jenkins实现自动化构建

  1. 下篇文章给大家讲解的是通用源码阅读mybatis源码详解:源码阅读的意义、方法;
  2. 觉得文章不错的朋友可以转发此文关注小编;
  3. 感谢大家的支持!

相关推荐

Python 中 必须掌握的 20 个核心:str()

str()是Python中用于将对象转换为字符串表示的核心函数,它在字符串处理、输出格式化和对象序列化中扮演着关键角色。本文将全面解析str()函数的用法和特性。1.str()函数的基本用法...

python中的函数报错后继续运行而不是停止整个程序

要让main...

如何在身份证号码中提取出生年月日的函数公式

在不同软件中,从身份证号码提取出生年月日的函数公式不同,以下是常见软件的方法:Excelo假设身份证号码在A列,在B列提取出生年月日,在B2单元格输入公式=TEXT(MID(A2,7,8),"...

sql中的一些CTE和开窗函数相关用法

CTE的优势提高可读性:将复杂查询分解为更简单的部分避免重复子查询:同一CTE可以在查询中多次引用递归查询:处理层次结构数据模块化SQL:将复杂查询拆分成逻辑模块...

【SQL】SQL 语法差异大全(PgSQL/MySQL/Oracle/TiDB/OceanBase)

以下是针对不同数据库系统的SQL语法差异总结,按功能分类展示:一、基础查询1.分页查询...

MySQL索引:从原理到实战的终极指南

MySQL索引原理揭秘MySQL索引是数据库高效查询的核心机制,其原理基于特定的数据结构(主要是B+Tree)和数据库引擎(如InnoDB)的实现策略。索引本质上是一种空间换时间的策略,虽然会占...

如何在本地安装开源人工智能Agent——AutoGen Studio的安装

AutoGen是微软出品的一个用于创建可自主行动,或与人类协同工作的多智能体AI应用程序的框架。下面来介绍如何在本地安装AutoGenStudio,AutoGenStudio是一个低代码界...

小巧WinForm库存系统,竟能实现这些功能?

第一次体验真正“握在手里的”库存控制,是在一个微型工厂的仓库运输带旁。顶着仓库里金属味和三十几平米的闷热,老王蹲在地上,一边用笔在账本上划格,一边嘴里嘟囔:“每次都说要数字化管理,数字在哪儿呢?”透过...

有关SQLite数据库的介绍

SQLite,是一种轻型的数据库,它的设计目标是嵌入式的,而且已经在很多嵌入式产品中使用了它,它占用资源非常的低,在嵌入式设备中,可能只需要几百K的内存就够了。它能够支持Windows/Linux/U...

SQLite 数据库Web管理工具

概述SQLite数据库以其轻量级和易于配置的特点,成为了许多项目中的首选数据库。尽管它的便捷性受到了广泛的认可,但对于数据库的管理和维护,尤其是在没有图形界面工具的情况下,开发者往往需要通过复杂的命...

SqlLite数据库注意要点分析

1.验证sqlite是否安装配置好了。执行sqlite3命令。当执行该命令的时候没有传递任何参数表示默认连接到了一个内存数据库,当退出该程序的时候,数据库自动销毁。退出命令:.quit.ex...

python 连接sqlite

在Python中,你可以使用标准库sqlite3来连接SQLite数据库。在Python中,sqlite3模块是内置的,无需使用pip进行安装。sqlite3模块提供了与SQ...

提升数据库搜索效率:探索SQLite的向量搜索扩展

大家好!今天我们要聊一个特别酷炫的东西——sqlite-vec,一个能让SQLite飞起来的向量搜索扩展。如果你对数据库的搜索速度不满意,那你可得好好看看这篇文章了。...

Qt编程进阶(21):Qt操作SQLite数据库及实例

QtSql模块Qt提供的QtSql模块实现了对数据库的访问,同时提供了一套与平台和具体所用数据库均无关的调用接口。此模块为不同层次的用户提供了不同的丰富的数据库操作类。例如,对于习惯使用SQL语法的用...

5分钟快速掌握在Python使用SQLite数据库,

小巧、稳定、快速!我为什么喜欢用SQLite...