02-Jenkins配置编译项目

简介: Jenkins配置编译任务,实现从GitLab拉取代码,通过Maven/Node编译打包,Docker构建镜像并推送到CCE仓库,kubectl更新服务。支持后台app-web、system-server及前端Vue项目自动化构建。结合86与164服务器特性,完成镜像导出tar包,实现跨版本兼容。

Jenkins配置编译任务
项目的大致流程:
从gitlab上拉取程序
运行 maven/Node 编译打包
运行Dockerfile打包成镜像
上传镜像到cce云上镜像仓库
使用kubectl更新cce云上的负载镜像
需要打包编译的内容:
后台项目的app-web模块
后台项目的system-server模块
前端VUE项目
后台编译
以admin登录Jenkins,选择新建任务。
任务名称:任意起,例如dev_myproject_java
选择构建一个自由风格的软件项目(也可以选择复制,填写需要复制的任务的任务名称)
General组:
限制项目的运行节点:填写节点服务器的标签表达式,限制只在该服务器上运行任务。myproject_dev
点击高级
使用自定义的工作空间:填写源程序下载到的服务器路径。/root/build/source/myproject/myproject-vue
显示名称:可以配置一个中文名,用于在列表页面展示。dev-后台-app
源码管理组:
选择Git
Repository URL:代码路径。填写git@xxxxxx那个。http:xxxxx的没有设置会报错。
从gitlab复制下来的路径需要进行调整,前面加上ssh://前缀,ip后面加上gitlab的22端口映射出来的端口号8022。例如:从gitlab复制出来的路径为git@192.168.xxx.xxx:myproject/myproject-vue.git,调整后为ssh://git@192.168.xxx.xxx:8022/myproject/myproject-vue.git
Credentials:选择前面创建的Jenkins用户私钥的那个凭据
Branches to build:指定要拉取的分支。例如本项目的*/dev_20240712
源码库浏览器:用于在jenkins上直接看本地构建时的代码差异。
源码库浏览器:gitlab
URL:gitlab的本项目页面:http://192.168.xxx.xxx:8090/myproject/myproject-vue/
version:gitlab版本:17.0
构建触发器组:
可以配置每次有代码push到gitlab时自动构建。为避免频繁构建,项目采用手动点击构建,不配置触发器。
构建环境组:
用于给节点服务器准备构建环境,使用Ant构建时可以配置。项目使用Maven、Node构建,且已经在节点服务器上手工部署了Maven、Node,无需进行配置。
Build Steps组:配置从gitlab拉取代码之后操作,即具体的构建执行步骤。项目全部使用shell方式执行。
登录CCE云:
执行Maven编译打包
执行Dockerfile制作镜像、推送CCE镜像仓库、更新cce上的负载镜像
登出CCE
前端VUE编译
与app-web模块的操作步骤类似,只是将Maven编译换成Node编译:
Jenkins打包docker镜像
86服务器上安装的Docker版本比较高,save出来的docker镜像tar文件无法直接在页面导入进CCE中。
164服务器上的Docker版本低,导出的镜像可以在页面导入CCE中,但是无法使用CCE客户端。
所以项目源码拉取、编译打包、生成镜像、kubectl更新等操作在86服务器上进行。如果需要导出docker镜像,则在164服务器上进行。
配置打包Docker的任务
在Jenkins上新建一个164节点。
新建一个任务save_docker,在164上运行,用于将docker镜像导出成tar文件。
勾选参数化构建过程:
字符参数IMAGE_LIST:需要打包的镜像列表(多个镜像以分号分隔)
布尔参数NEED_SAVE_TAR:是否需要导出成tar
增加一个执行shell的步骤:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
if [ "$NEED_SAVE_TAR" = true ] && [ -n "$NEED_SAVE_TAR" ]; then

# 检查 IMAGE_LIST 是否为空
if [ -z "$IMAGE_LIST" ]; then
    echo "IMAGE_LIST is empty."
else
    # 保存原始的 IFS
    OLD_IFS=$IFS

    # 设置 IFS 为分号
    IFS=';'

    # 遍历 IMAGE_LIST
    for image in $IMAGE_LIST; do
        # 还原 IFS 为默认的值
        IFS=''

        fullImagePath=${image}
        echo "开始下载镜像:${fullImagePath}"
        docker pull ${fullImagePath}
        echo '镜像下载完成.'

        # 提取 registry, namespace, image, 和 tag
        registry_and_namespace_and_image=${image%:*}
        tag=${image##*:}

        # 将 registry 和 namespace/image 分开
        registry=${registry_and_namespace_and_image%%/*}
        namespace_and_image=${registry_and_namespace_and_image#*/}

        # 提取 namespace 和 image
        namespace=${namespace_and_image%%/*}
        image=${namespace_and_image#*/}
        imageName=${image%%:*}

        echo "转换tag"
        newImageName=${namespace}/${imageName}:${tag}
        docker tag ${fullImagePath} ${newImageName}
        echo "转换完成"

        echo "开始将镜像打成tar包:${namespace}-${imageName}-${tag}.tar"
        docker save -o /root/DockerSaveTar/${namespace}-${imageName}-${tag}.tar  ${newImageName}
        echo "打成tar包完成."        

        echo "删除本地下载的镜像"
        docker rmi ${fullImagePath} ${newImageName}
        echo "删除完成"
    done

    # 恢复原始的 IFS
    IFS=$OLD_IFS
fi

else
echo "NEED_SAVE_TAR为false或空,不执行保存tar包的操作"
exit 0
fi
直接调用该任务
可以在Jenkins上直接调用该任务,需要传入参数。例如:
1
2
IMAGE_LIST=192.168.xxx.xxx:8889/myproject/app-web:20240903-194055;192.168.xxx.xxx:8889/myproject/system-server:20240903-194055
NEED_SAVE_TAR=true # 勾选即可
任务便会自动拉取这两个镜像导出成tar
在其他任务执行后自动调用该任务
例如在预警后台的编译任务中,生成docker镜像推送仓库后,将docker镜像名称写入一个文件中:
1
echo "IMAGE_LIST=192.168.xxx.xxx:8889/myproject/app-web:${VERSION_ALL_TAG};192.168.xxx.xxx:8889/myproject/system-server:${VERSION_ALL_TAG}" > /root/build/source/myproject/myproject-java-env.properties
新增一个构建后操作:选择Trigger parameterized build on other projects(需要安装对应插件后才会有该选项)。
Projects to build(构建后需要执行的任务,多个任务逗号分隔):save_docker(即打包docker任务)
Trigger when build is(什么情况下调用后续任务):Stable or unstable but not failed(稳定、有警告都执行,只要不是失败)
添加参数:
Parameters from properties file(从properties文件中获取参数):路径为前面写入的文件/root/build/source/myproject/myproject-java-env.properties
Boolean parameters(添加一个布尔参数):NEED_SAVE_TAR,手动修改该参数的值来控制是否生成tar

相关文章
|
canal Kubernetes 关系型数据库
【K8S系列】深入解析k8s网络插件—Canal
【K8S系列】深入解析k8s网络插件—Canal
3553 0
阿里云商标注册申请官方入口(附商标自助申请流程)
阿里云商标分为商标智能注册申请、商标安心注册申请和商标顾问注册申请
32947 4
阿里云商标注册申请官方入口(附商标自助申请流程)
|
2月前
|
存储 JSON 安全
10-云文档环境搭建
本方案基于Docker部署NextCloud与OnlyOffice,实现私有云文档存储与在线协同编辑。通过NextCloud管理文件,集成OnlyOffice实现多人实时编辑Word、Excel等文档,支持权限控制与文件分享,构建安全高效的办公环境。
|
2月前
|
机器学习/深度学习 自然语言处理 网络架构
Transformer基础结构
Transformer是Vaswani等人于2017年提出的基于注意力机制的神经网络,彻底革新了自然语言处理。其核心为编码器-解码器架构,通过自注意力机制并行捕捉长距离依赖,结合位置编码、残差连接与层归一化,显著提升建模效率与性能,成为BERT、GPT等大模型的基础。
|
2月前
|
存储 Java
超长String接收处理
Java中字符串变量最大长度为Integer.MAX_VALUE,但字符串字面量受class文件格式限制,理论最大65535,实际仅支持65534。超过则编译报错。解决方法是使用StringBuilder分段处理长字符串,避免字面量过长。
|
2月前
|
安全 Java
common-lang3
避免三目运算符引发的Java自动拆装箱异常,推荐使用ObjectUtils.defaultIfNull替代,确保对象安全转换,防止空指针及类型转换错误,提升代码健壮性与可读性。
|
2月前
|
网络协议 关系型数据库 MySQL
08-云上nacos集群搭建
在CCE上基于nacos/nacos-server:2.3.2镜像搭建高可用集群,配置MySQL 8.0数据库并初始化表结构,通过StatefulSet部署3个实例,结合headless Service实现节点发现,配置Ingress对外提供http://xxx.xxx.xxx.xxx/nacos访问,支持认证与持久化。
|
2月前
|
Java Shell Docker
12-Docker发布微服务
本文介绍如何搭建SpringBoot项目并部署到Docker容器。首先创建Maven工程,编写主类、Controller及配置文件,打包成jar;再通过Dockerfile将jar构建成镜像,并运行容器,实现微服务的快速部署与发布,端口6001对外提供服务。
|
2月前
|
存储 人工智能 JSON
🤖 Agent系统
大模型Agent是具备自主规划、推理决策、工具调用与记忆能力的智能体,核心由大脑(LLM)、感知、行动与记忆组件构成,支持任务分解、反思优化与多轮交互。常见框架如LangChain、AutoGPT、CrewAI等,广泛应用于复杂任务处理与企业级AI系统。(238字)
|
2月前
|
存储 jenkins 持续交付
Jenkins环境搭建
本文介绍Jenkins环境搭建步骤,基于Docker部署jenkins/jenkins:2.464镜像。配置容器卷/var/jenkins_home持久化数据,映射端口9988(Web)和50000(Agent)。通过docker run命令启动容器并设置重启策略,初始化管理员账号admin/admin。完成后访问http://192.168.xxx.xxx:9988,安装SVN中的插件包,按依赖顺序升级替换,完成Jenkins配置。