阅读 1399

Jenkins+Gitlab+Maven+Tomcat 持续集成,自动部署项目

持续集成:Continuous Integration,简称CI,意思是,在一个项目中,任何人对代码库的任何改动,都会触发CI服务器自动对项目进行构建,自动运行测试,甚至自动部署到测试环境。这样做的好处就是,随时发现问题,随时修复。因为修复问题的成本随着时间的推移而增长,越早发现,修复成本越低。当你想要更新你的项目,只要动手提交代码到你的代码仓库,剩余的更新部署操作就只管交由CI服务器来完成就好,这次使用的CI工具是JenKins。

Jenkins

  • 搭建Jenkins持续集成服务器可以分为两大步骤,一是在服务器安装好所需的软件,二是配置我们的持续集成项目

    Jenkins拉取代码编译部署示意图

  • 安装所需的各种软件

    • 安装启动 Jenkins

      执行命令 rpm -ivh xxx.rpm  安装Jenkins
      
      //启动JenKins
      /etc/init.d/jenkins start 
      
      浏览器输入 http://xxx服务器地址:8080/
      
      //默认端口号是8080
      复制代码

      JenKins启动1
      JenKins启动

    • JenKins默认端口号是8080,这与Tomcat默认端口号冲突,所有我们可以把Jenkins的端口号改成我们自己定义的端口号 9090

      • 修改端口号的文件为 /etc/sysconfig/jenkins,字段为JENKINS_PORT

        执行命令进行修改,如果碰到无法启动Jnekins, 无法启动(如遇此Starting Jenkins bash: /usr/bin/java: No such file or directory错误 )修改 /etc/init.d/jenkins 加入 /opt/jdk1.8.0_181/bin/java原因
        是Java的环境变量没有找到,一般使用centos服务默认安装openjdk,如果自己卸载openJdk并重新安装sun的JDK,则也需要在该文件中加入路径,如图所示
        
        vim /etc/sysconfig/jenkins 
        
        //添加Java地址
        
        vim /etc/init.d/jenkins
        
        复制代码

        修改Jenkins端口
        添加Java地址

    • 修改端口无法启动的情况,有可能是服务器防火墙没有添加端口的监听,导致无法访问

      vim /etc/sysconfig/iptables
      
      查看是否监听端口(如果配置了自己定义的端口,需要先访问该端口一次才能看到监听)
      
      netstat -ntlp
      
      //重启防火墙配置(不重启端口还是无法生效)
      service iptables restart
      复制代码

      添加新监听的端口

    • 关闭Jenkins

      • 只需要在访问jenkins服务器的网址url地址后加上exit。例如我jenkins的地址http://localhost:8080/,那么我只需要在浏览器地址栏上输入http://xxx:9090/exit 网址就能关闭jenkins服务.
    • 重启Jenkies

      //xxx:8080 是搭建Jenkins服务器地址
      http://xxx:8080/restart
      
      复制代码
    • 重新加载配置信息

    http://localhost:8080/reload
    复制代码
    • 安装jdk

    查看Java相关的包信息: 
     rpm -qa|grep java (或rpm -qa|grep jdk,rpm安装后,包名里没有Java)
    卸载 
    yum -y remove java [包名] 
    例如 
    yum –y remove java java-1.8.0-openjdk-1.8.0.131-3.b12.el7_3.x86_64 
    
    jdk 卸载方法 https://blog.csdn.net/xyj0808xyj/article/details/52444694
    
    //解压到指定目录
    tar -zxvf jdk-8u181-linux-x64.tar.gz -C /opt/
    
    //编辑配置文件
    vim /etc/profile
    
    export JAVA_HOME=/opt/jdk1.8.0_181
    export PATH=$JAVA_HOME/bin:$PATH
    export CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib:$CLASSPATH 
      
    //更新配置文件
    source /etc/profile
    
    复制代码
    • 安装Tomcat

      • 官网下载 Tomcat8.5

      • 直接解压到服务器(注意这里指的服务器是项目部署的服务器,应该是和部署JenKins的服务器不同)

      • 强制关闭 tomcat 命令

        //强制关闭
        ps -ef|grep tomcat
        
        //杀掉无法关闭进程
        kill -9 XXXX
        
        复制代码
    • 安装 git (安装在部署JenKins服务器上)

      安装依赖
      yum install curl-devel expat-devel gettext-devel openssl-devel zlib-devel asciidoc
      
      yum install  gcc perl-ExtUtils-MakeMaker
      
      如果已经安装了git,但是版本太老,可以先卸载
      yum remove git 
      
      下载git包解压
      tar -vxf git-2.15.1.tar.gz -C /opt
      
      进入git 目录
      cd /opt/git-2.18.0/
      
      执行以下命令
      
      make prefix=/usr/local/git all
      
      make prefix=/usr/local/git install
      
      echo "export PATH=$PATH:/usr/local/git/bin" >> /etc/profile  //配置环境变量
      
      source /etc/profile //跟新配置文件
      
      git --version 查看git版本
      
      复制代码

      安装git版本

      • 安装 maven(安装在部署JenKins服务器上)

        • 后台项目为spring-boot搭建,需要安装maven
        • 下载 maven 3.5.4
      执行以下命令
      tar -zxvf apache-maven-3.3.9-bin.tar.gz -C /opt
      
      在/etc/profile文件末尾增加以下配置
      M2_HOME=/opt/tyrone/maven (注意这里是maven的安装路径)
       export PATH=${M2_HOME}/bin:${PATH}
       
      重载/etc/profile这个文件
        source /etc/profile 
      复制代码

      maven安装成功

      • GitLab服务器配置

        • 由于公司已经搭建好Gitlab服务器,所以我也没有配置过Gitlab,不过Gitlab配置网上已经有很多资料,可以自行百度。
    • Jenkins配置新建项目配置

      • Jenkins配置

        • 第一次进入Jnekins,首先根据提示找到安装服务器的密码

        • 如果服务器可以联网,则选择他推荐的插件直接安装,如果服务器无法连接外网,只是在公司内网环境,则可以离线下载插件再上传到我们服务器的Jenkin中,离线插件下载地址,这种方式需要耐心,因为需要安装的插件可不止一两个,如果你的服务器不能上网,我这有一份下载好的插件,可以自行去下载(下载地址

        • 在Jenkins系统管理模块的系统配置中配置我们的Gitlab,需要登录到Gitlab中获取APIToken

          系统配置GitLab
          获取API Token
          GitLab API Token配置

        • 生成ssh key(在部署Jenkins服务器上生成)

          • 配置SSH KEY ,用于后续项目可以通过Jenkins部署到应用服务器

            输入命令,一路回车
            ssh-keygen -t rsa 
            
            现在你的私钥被放在了~/.ssh/id_rsa 这个文件里,而公钥被放在了 ~/.ssh/id_rsa.pub 这个文件里
            
            可以将私钥配置到JneKins的系统设置中,配置框选项是需要Jenkins安装SSH插件的,如下图所示
            
            公钥则配置到各个应用服务器的这个目录下/root/.ssh/authorized_keys,没有authorized_keys则创建这个文件,如下图所示
            
            最后测试应用服务器是否都能成功连接,如下图所示
            
             
            复制代码

            ssh私钥配置
            公钥复制到应用服务器authorized_keys
            测试配置公钥的应用服务器是否连接成功

          • 接下来还是系统管理模块中的全局工具配置 Jenkins的 JDK、git和maven。前面我们已经把这些工具都给安装了,现在配置到Jenkins中,如下图所示

            配置Jenkins jdk git
            配置Jenkins maven

      • 新建项目配置

        • 新建一个maven项目(没有maven项目选项则需要下载对应插件)

          新建maven项目

        • 首先配置源码管理,如图

          新建项目源码管理配置

        • 配置项目构建触发器

          配置项目构建触发器

        • 配置maven项目编译

          配置maven项目编译

        • 项目构建成功后部署应用服务器的配置

          项目构建成功后部署应用服务器的配置

        • Tomcat重启脚本(应当放在与Tomcat目录同路径下)

          #! /bin/sh
          echo '####################开始自动部署####################'
          export JAVA_HOME=/usr/local/jdk1.8.0_181
          path=`pwd` #当前路径
          tomcatPath=/data/XXXX/tomcat_gxxmt_8080 #指定tomcat文件目录名称
          cd ../$tomcatPath/bin #进入tomcat的bin目录
          PID=$(ps -fu `whoami`|grep tomcat|grep -v grep|awk '{print $2}')
          if [ -z "$PID" ];then
           echo "no tomcat process"
          else
          ./shutdown.sh #停止tomcat服务
          fi
          cd ../webapps #进入tomcat的webapps目录
          rm -rf XXXX-api #删除以前部署的项目
          echo '####################删除完成####################'
          cd ../bin
          ./startup.sh #启动tomcat服务
          echo '####################部署结束####################'
          复制代码
        • 项目构建成功并发布到了对应服务器执行对应脚本,这里就可以看到JenKins的灵活性,可以配置多台发布的应用服务器的多个Tomcat,灵活自动部署应用服务器配置

        • 项目构建编译部署成功

          项目构建编译部署成功

  • 集成部署遇到的问题

    • ERROR: Exception when publishing, exception message [Exec timed out or was interrupted after 120,000 ms](执行脚本没有正常退出,导致部署超时)

      错误1

    • 解决:脚本执行加入忽略输入(nohup ....)

      nohup sh /data/gxxmt-api/restart.sh
      //当我们使用nohup命令的的时候,日志会被打印到nohup.out文件中去。
      //如果我们不做任何处理,会随着每次的重新启动,nohup.out会越来越大
      //。所以我在我执行的脚本中添加了
      cp /dev/null nohup.out
      复制代码

      在jenkins项目配置SSH Publishers勾选了Exec in pty,表示执行完脚本立即退出

      错误1解决勾选Exec in pty

    • jenkins主目录迁移,jenkins默认主目录一般都是安装在系统盘,运行一段时间后项目部署的历史版本,日志文件,工作控件都会占用大量的系统空间,这样就会引发系统盘磁盘空间不足,首先我们可以修改jenkins主目录

      //更改主目录
      vim /etc/sysconfig/jenkins
      JENKINS_HOME="/data/jenkins"
      
      复制 /var/lib/jenkins/ 目录到 /data目录下
      
      修改目录用户权限
      
      chown -R jenkins:jenkins /data/jenkins
      
      重启 /etc/sysconfig/jenkins restart
      复制代码

      主目录修改成功

      其次我们还可以在项目配置中设置丢弃历史构建

      设置丢弃历史构建

    • Url is blocked: Requests to the local network are not allowed Gitlab 设置Jenkins的webhook地址无法设置

      WebHook地址无法设置

      升级新版Gitlab,要允许WebHook,需要在在Gitlab的Admin账户中,在settings标签下面,找到OutBound Request,勾选上Allow requests to the local network from hooks and services ,保存更改即可解决问题(如下图所示)

      Gitlab 允许WebHook

    • Gradle 编译Android 项目 /lib64/libc.so.6: version `GLIBC_2.14’ not found,系统是CentOS 6.9,最高支持glibc的版本为2.12,而研发程序要2.14版本,所以需要升级。

      glibc_2.14库无法找到

    //查看系统版本
    cat /etc/redhat-release
    //查看glibc库版本
    strings /lib64/libc.so.6 |grep GLIBC_
    //下载glibc库 并安装
    #下载
    wget http://ftp.gnu.org/gnu/glibc/glibc-2.14.tar.gz 
    wget http://ftp.gnu.org/gnu/glibc/glibc-ports-2.14.tar.gz 
    #解压
    tar -xvf  glibc-2.14.tar.gz 
    tar -xvf  glibc-ports-2.14.tar.gz
    #创建相关目录
    mv glibc-ports-2.14 glibc-2.14/ports
    mkdir glibc-build-2.14
    cd glibc-build-2.14/ 
    
    #生成C编译的环境
    yum -y install gcc
    
    #编译C
    ../glibc-2.14/configure  --prefix=/usr --disable-profile --enable-add-ons --with-headers=/usr/include --with-binutils=/usr/bin
    make
    
    # 安装刚才编译好的 libc.so
    makeinstall 
    
    # 查看glibc库版本
    strings /lib64/libc.so.6 |grep GLIBC_
    复制代码

最后

关注下面的标签,发现更多相似文章
评论