zoukankan      html  css  js  c++  java
  • Jenkins+Docker+Git+Registry

    从0到1体验Jenkins+Docker+Git+Registry实现CI自动化发布

     

    笔者:@拿着保温瓶的年轻人


    正文:

    一、前言

    Jenkins是一款开源 CI&CD 软件,用于自动化各种任务,包括构建、测试和部署软件。Jenkins 支持各种运行方式,可通过系统包、Docker 或者通过一个独立的 Java 程序。
    Jenkins是一个广泛用于持续构建的可视化Web工具,持续构建就是将项目自动化编译、打包、部署。通过规范化来完成,简单,繁琐,浪费时间的重复工作。

     Jenkins名言:构建伟大,无所不能! 
    Jenkins用户手册传送门:https://jenkins.io/zh/doc/

    二、发布流程

     工作详细流程:

    三、环境准备

    服务器角色 IP地址 主机名 运行服务 系统版本
     Jenkins/Docker  192.168.115.21  jenkins 安装Docker、Tomcat运行Jenkins、Git客户端、JDK、Maven CentOS 7.4 
     Git/Registry  192.168.115.22  git  安装Docker、Git服务、Registry私有仓库容器  CentOS 7.4
     Docker  192.168.115.23  docker  安装Docker、拉取Tomcat镜像运行Java项目  CentOS 7.4

    四、部署思路梳理

    五、三台机器上操作

    i. 配置好yum源安装必要的一些系统工具

    [root@jenkins ~]# yum install -y yum-utils device-mapper-persistent-data lvm2

     ii. 添加软件源信息

    [root@jenkins ~]# yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

    iii. 更新并安装 Docker-CE

    [root@jenkins ~]# yum makecache fast
    [root@jenkins ~]# yum -y install docker-ce

    iv. 开启Docker服务

    [root@jenkins ~]# systemctl start docker
    [root@jenkins ~]# systemctl enable docker

    v. 检查docker版本

    注:以上步骤三台服务器都需要同样的操作。

    六、Git机器上操作

    6.1、部署Git仓库,Git机器上操作

    i. 安装Git

    [root@git ~]# yum install git -y

    ii. 创建Git用户和设置密码

    复制代码
    [root@git ~]# useradd git
    [root@git ~]# passwd git
    Changing password for user git.
    New password: *******
    BAD PASSWORD: The password is shorter than 8 characters
    Retype new password: *******
    passwd: all authentication tokens updated successfully.
    复制代码

    iii. 创建仓库

    复制代码
    [root@git ~]# su - git
    [git@git ~]$ mkdir test-jenkins.git
    [git@git ~]$ cd test-jenkins.git/
    [git@git test-jenkins.git]$ git --bare init
    Initialized empty Git repository in /home/git/test-jenkins.git/
    复制代码

    6.2、访问Git仓库测试,Jenkins机器上操作

    i. 安装Git客户端

    [root@jenkins ~]# yum install git -y

    ii. 生成公钥,拷贝到Git服务器

    [root@jenkins ~]# ssh-keygen -t rsa   // 三个回车
    [root@jenkins ~]# ssh-copy-id git@192.168.115.22   // 注意是git用户

    iii. 拉取Git项目测试

    [root@jenkins ~]# git clone git@192.168.115.22:/home/git/test-jenkins.git
    Cloning into 'test-jenkins'...
    warning: You appear to have cloned an empty repository.

    6.3、部署Docker私有仓库,Git机器上操作

    i. 创建Registry容器

    [root@git ~]# docker run -d -v /opt/registry:/var/lib/registry -p 5000:5000 --restart=always --name rregistry registry

    ii. 检查Registry容器状态,已经成功启动了

    七、Docker机器上操作

    i. 配置私有仓库

    [root@docker ~]# cat  /etc/docker/daemon.json 
    {"registry-mirrors": ["http://abcd1234.m.daocloud.io"],
     "insecure-registries": [ "192.168.115.22:5000"]}

    注:第2行是192.168.115.22 Docker私有仓库地址。

    ii. 重启Docker服务

    [root@docker ~]# systemctl restart docker

    iii. 配置JDK
    JDK1.8下载:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

    [root@docker ~]# tar zxvf jdk-8u221-linux-x64.tar.gz
    [root@docker ~]# mv jdk1.8.0_221/ /usr/local/jdk

    iv. 构建Tomcat基础镜像

    复制代码
    [root@docker ~]# cat Dockerfile
    # 基础镜像
    FROM centos:7
    # 维护者信息
    MAINTAINER test-Jenkins        
    # Tomcat版本
    ENV VERSION=8.5.45    
    # jdk目录    
    ENV JAVA_HOME /usr/local/jdk    
    # 安装wget命令
    RUN yum install wget -y        
    
    # 下载Tomcat
    RUN wget http://mirrors.tuna.tsinghua.edu.cn/apache/tomcat/tomcat-8/v${VERSION}/bin/apache-tomcat-${VERSION}.tar.gz &&      
    # 解压tomcat
    tar zxf apache-tomcat-${VERSION}.tar.gz &&                     
    # 移动解压出来的tomcat文件
    mv apache-tomcat-${VERSION} /usr/local/tomcat-jenkins &&         
    # 删除不需要的文件,减轻容器体积
    rm -rf apache-tomcat-${VERSION}.tar.gz /usr/local/tomcat-jenkins/webapps/* &&         
    # 创建ROOT,tomcat默认目录
    mkdir /usr/local/tomcat-jenkins/webapps/ROOT            
    
    # 映射端口
    EXPOSE 8080        
    # 启动tomcat    
    CMD ["/usr/local/tomcat-jenkins/bin/catalina.sh", "run"]
    复制代码

    v. 构建镜像上传Registry仓库

    [root@docker ~]# docker build -t 192.168.115.22:5000/tomcat-jenkins -f Dockerfile .

    vi. 推送到镜像仓库

    [root@docker ~]# docker push 192.168.115.22:5000/tomcat-jenkins

    vii. 验证是否上传Registry镜像仓库

    [root@docker ~]# curl -XGET http://192.168.115.22:5000/v2/_catalog
    {"repositories":["tomcat-jenkins"]}

    八、Jenkins机器上操作

    8.1、配置私有仓库、Git、JDK、Maven

    i. 配置私有仓库

    复制代码
    [root@docker ~]# cat  /etc/docker/daemon.json 
    {"registry-mirrors": ["http://abcd1234.m.daocloud.io"],
     "insecure-registries": [ "192.168.115.22:5000"]}
     
    重启Docker服务:
    [root@docker ~]# systemctl restart docker
    复制代码

    注:第2行是192.168.115.22 Docker私有仓库地址。

    ii. 安装JDK 
    JDK1.8下载:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

    [root@jenkins ~]# tar zxvf jdk-8u221-linux-x64.tar.gz
    [root@jenkins ~]# mv jdk1.8.0_221/ /usr/local/jdk

    iii. 配置JDK

    复制代码
    [root@jenkins ~]# vim /etc/profile
    --------------------添加环境变量---------------------
    JAVA_HOME=/usr/local/jdk
    PATH=$PATH:$JAVA_HOME/bin
    CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
    export JAVA_HOME PATH CLASSPATH
    复制代码

    iv. 更新系统环境变量

    [root@jenkins ~]# source /etc/profile

    v. 验证

    [root@jenkins ~]# java -version

    vi. 安装Maven 
    Maven下载连接:http://maven.apache.org/download.cgi

    [root@jenkins ~]# tar zxvf apache-maven-3.6.1-bin.tar.gz
    [root@jenkins ~]# mv apache-maven-3.6.1 /usr/local/maven

    8.2、安装Jenkins和Tomcat

    Jenkins下载链接:https://jenkins.io/zh/download/ 
    Tomcat下载链接:http://mirror.bit.edu.cn/apache/tomcat/tomcat-8/v8.5.45/bin/apache-tomcat-8.5.45.tar.gz

    i. 解压和拷贝Jenkins.war到Tomcat目录下

    [root@jenkins ~]# tar zxvf apache-tomcat-8.5.45.tar.gz
    [root@jenkins ~]# mv apache-tomcat-8.5.45  /usr/local/tomcat-jenkins
    [root@jenkins ~]# rm -rf /usr/local/tomcat-jenkins/webapps/*
    [root@jenkins ~]# unzip jenkins.war -d /usr/local/tomcat-jenkins/ROOT

    ii. 启动Tomcat

    [root@jenkins ~]# /usr/local/tomcat-jenkins/bin/startup.sh

    8.3、配置Jenkins

    i. 访问Jenkins(http://IP:8080

    ii. 获取密码

    [root@jenkins ~]# cat /var/jenkins_home/secrets/initialAdminPassword
    e3218946860a4e62b5b4808db0a7f2b6

    iii. 选择插件的安装(不熟悉的情况下推荐安装即可,省得麻烦)

    iv. 创建用户

    v. 配置Maven、jdk、git环境

    注:系统管理 —>  全局工具配置,指定JDK、Maven路径,Git保持默认

    vi. Jenkins安装必要插件

    注:系统管理 —> 管理插件(安装SSH与Git Parameter插件)

    插件说明:

    SSH:用于SSH远程Docker主机执行Shell命令;
    Git Parameter:动态获取Git仓库Branch、Tag;

    vii. 配置SSH插件

    viii. 输入Docker主机的用户名/密码

    ix. 添加SSH远程主机

    注:记得点击左下角“保存”按钮。

    九、上传JAVA项目代码到Git仓库

    先下载并安装git:https://git-scm.com/download/

    9.1、使用IDEA创建测试项目

    创建新项目:

    选择Spring Initializr:本地提前配置好JDK环境和Maven环境

    选择war:

    选择Web —> Sping Web Starter:

    随便起个项目名称:

    来个简单的“Hello World”:

    代码如下:

    复制代码
    package com.example.demo;
    
    import org.springframework.boot.SpringApplication;
    import org.springframework.boot.autoconfigure.SpringBootApplication;
    import org.springframework.web.bind.annotation.RequestMapping;
    import org.springframework.web.bind.annotation.RestController;
    
    @RestController
    @SpringBootApplication
    public class DemoApplication {
        public static void main(String[] args) {
            SpringApplication.run(DemoApplication.class, args);
        }
        @RequestMapping
        public String hello() {
            return "Hello Jenkins v1.0";
        }
    }
    复制代码

    本地运行测试项目:

    本地浏览器访问测试:

    9.2、连接Git仓库上传代码

    i. 在IDEA中设置Git,在File-->Setting->Version Control-->Git-->Path to Git executable选择你的git安装后的git.exe文件,然后点击Test,测试是否设置成功。

    ii. 选择要上传的项目

    iii. 将本项目添加到本地仓库

    注:我们在项目文件名上右键选择 git,通过 add 添加到本地库的跟踪区,再comment 正式提交到本地仓库。

    iv. 添加Git仓库地址

    v. 上传代码

    vi. 在Jenkins机器上下载项目验证是否上传成功

    [root@jenkins ~]# git clone git@192.168.115.22:/home/git/test-jenkins.git
    [root@jenkins ~]# cd test-jenkins/
    [root@jenkins test-jenkins]# ls
    mvnw  mvnw.cmd  pom.xml  src

    9.3、给项目添加Tag

    9.3.1、IDEA测试项目连接Git添加Tag

    i. 进入Version Control-->log

    ii. 在之前版本中,右键,新建标签

    iii. Push标签

    注:由于不是在当前最新版本打入的标签,push 时需要选择 push tags (all),不然不能push。

    iv. 在Git仓库上查看Tag验证一下

    [root@git ~]# su - git
    [git@git ~]$ cd test-jenkins.git/
    [git@git test-jenkins.git]$ git tag
    v1.0

    9.3.2、如果是直接上传项目到Git仓库,加Tag方法

    复制代码
    [root@git ~]# su - git
    [git@git ~]$ cd test-jenkins.git/
    [git@git test-jenkins.git]$ git branch
    [git@git test-jenkins.git]$ git tag v1.0
    [git@git test-jenkins.git]$ git tag
    v1.0
    复制代码

    额外补充删除Tag:

    [git@git test-jenkins.git]$ git tag -d v1.0

    十、Jenkins发布测试

    10.1、配置Jenkins项目

    安装Maven插件,构建一个Maven项目:

    配置项目(新建任务 -> 输入任务名称,构建一个Maven项目)

    配置Git参数化构建:

    动态获取Git仓库Tag,与用户交互选择Tag发布:

    指定项目Git仓库地址:

    注:修改*/master为$Tag,Tag是上面动态获取的变量名,表示根据用户选择打代码版本。

    设置maven构建命令选项(clean package -Dmaven.test.skip=true):

    Jenkins本机镜像构建和推送到私有镜像仓库:

    代码如下:

    复制代码
    # 定义变量
    REPOSITORY=192.168.115.22:5000/tomcat-jenkins:${Tag}
    
    # 开始构建镜像
    cat > Dockerfile << EOF
    # 拉取私有仓库的镜像
    FROM 192.168.115.22:5000/tomcat-jenkins:latest
    # 删除Tomcat下不需要的ROOT项目
    RUN rm -rf /usr/local/tomcat-jenkins/webapps/ROOT
    # 将jenkins编译好的war包拷贝到Tomcat目录下
    COPY target/*.war /usr/local/tomcat-jenkins/webapps/ROOT.war
    # 运行Tomcat
    CMD ["/usr/local/tomcat-jenkins/bin/catalina.sh", "run"]
    EOF
    
    # 清除Jenkins主机旧的构建镜像
    docker image rm 192.168.115.22:5000/tomcat-jenkins:${Tag}
    # 构建自定义镜像
    docker build -t $REPOSITORY .
    # 开始上传镜像
    docker push $REPOSITORY
    复制代码

    SSH远程在Docker主机上执行创建容器命令:

    代码如下:

    复制代码
    # 定义变量
    REPOSITORY=192.168.115.22:5000/tomcat-jenkins:${Tag}
    
    # 删除之前容器和镜像
    docker rm -f tomcat-jenkins |true
    docker image rm $REPOSITORY |true
    
    # 开始部署容器
    docker container run -d --name tomcat-jenkins -v /usr/local/jdk:/usr/local/jdk -p 80:8080 $REPOSITORY
    复制代码

    10.2、开始构建

    点击项目名称 —> 选择版本 —> 开始构建

    查看构建过程以及信息输出:

    查看是否构建成功:

    验证项目是否可以访问:

    十一、后面再废话两句

    复制代码
    到此就简单体验了Jenkins+Docker+Git+Registry实现一套CI自动化发布流程,本来打算Jenkins放在容器上运行的,发现Jenkins容器里面需要Docker命令,但是比较繁琐,也感觉没必要好像,就直接采用方法一了。
    感兴趣的可以通过以下方式实现:
    - 不使用任何Jenkins镜像,宿主机安装Jenkins [宿主机有Docker服务]
    - 不使用官方Jenkins镜像,自己构造带有Docker服务的Jenkins镜像
    - Docker-in-Docker [DinD]
    - Docker-outside-of-Docker [DooD]
    - 使用Jenkins的Docker插件
    复制代码

    注:如有问题请指点出来,非常感谢。 
    注:本文参考这篇博客,非常感谢博主:https://blog.51cto.com/lizhenliang/2159817

  • 相关阅读:
    maven3实战之仓库(快照版本)
    三、常见分析函数详解
    二、理解over()函数
    一、Oracle分析函数入门
    Java程序性能优化技巧
    同步synchronized用法
    java枚举使用详解
    jpa+spring配置多数据源
    jxl导入/导出excel
    CVS数据的导入和导出
  • 原文地址:https://www.cnblogs.com/Leo_wl/p/11796590.html
Copyright © 2011-2022 走看看