第四章：安装Docker，安装配置gitlab私有仓库以及jenkins自动化部署（图文）

第四章：安装Docker，安装配置gitlab私有仓库以及jenkins自动化部署（图文）

文章目录

​​一、docker安装​​​​二、配置docker对外端口​​​​三、安装配置gitlab​​​​四、安装配置jekins​​

​​一、准备工作​​​​二、下载安装配置Jenkins​​

​​五、jenkins主要的一些配置​​​​六、项目配置​​​​七、jekins迁移到另一台服务器上​​​​总结​​

一、docker安装

说明：以下为国内云服务器（阿里云，腾讯云）以及自行安装的CentOS7为环境

#准备工作,查看内核信息：

uname -r

#移除yum.pid文件

rm -f /var/run/yum.pid

#更新yum源

yum update

centos yum安装使用时提示 cannot find a valid baseurl for repo:base/7/x86_64 的解决方法

#出现[Errno -1] 软件包与预期下载的不符。 建议：运行 yum --enablerepo=updates clean metadata正在尝试其它镜像。使用以下命令

yum --enablerepo=updates clean metadata

#编辑文件改成Centos7

cd /etc/yum.repos.dvi CentOS-Base.repo

#将文件中$releasever全部改成7

:%s/$releasever/7/g

#清除和缓存

yum clean all && yum makecache

#卸载旧版本

sudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest \ docker-latest-logrotate \ docker-logrotate \ docker-engine \ docker-selinux \ docker-ce

#卸载后将保留/var/lib/docker的内容（镜像、容器、存储卷和网络等）。

rm -rf /var/lib/docker

#下载之前查看网络环境在出口是否封了相应端口

ping baidu.com

#安装前可查看device-mapper-persistent-data和lvm2是否已经安装，如果安装了可以跳过这个步骤

rpm -qa|grep device-mapper-persistent-datarpm -qa|grep lvm2

#安装依赖软件包

sudo yum install -y yum-utils device-mapper-persistent-data lvm2

#安装yum工具包

sudo yum -y install yum-utils

#设置yum源

如果服务器在国外可以使用官方的

sudo yum-config-manager \ --add-repo \ yum-config-manager \ --add-repo \ yum makecache fast

#安装Docker

安装最新版本docker-ce

sudo yum install -y docker-ce

#安装指定版本docker-ce可使用以下命令查看

sudo yum list docker-ce.x86_64 --showduplicates | sort -r

#安装特定版本

sudo yum install docker-ce-18.09.1 docker-ce-cli-18.09.1 containerd.io

#安装完成之后可以使用命令查看

docker version

结果：出现Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running?

#重启docker

systemctl start docker

#查看状态

systemctl status docker

#再次查看版本

docker version

结果：

Client: Docker Engine - Community Version: 20.10.9 API version: 1.41 Go version: go1.16.8 Git commit: c2ea9bc Built: Mon Oct 4 16:08:25 2021 OS/Arch: linux/amd64 Context: default Experimental: true Server: Docker Engine - Community Engine: Version: 20.10.9 API version: 1.41 (minimum version 1.12) Go version: go1.16.8 Git commit: 79ea9d3 Built: Mon Oct 4 16:06:48 2021 OS/Arch: linux/amd64 Experimental: false containerd: Version: 1.4.11 GitCommit: 5b46e404f6b9f661a205e28d59c982d3634148f8 runc: Version: 1.0.2 GitCommit: v1.0.2-0-g52b36a2 docker-init: Version: 0.19.0 GitCommit: de40ad0

#通知systemd重载此配置文件

systemctl daemon-reload

#docker开机自启设置

systemctl enable docker.service

#出现Created symlink from /etc/systemd/system/multi-user.target.wants/docker.service to /usr/lib/systemd/system/docker.service.指定root用户添加到用户组，然后重试开机自启动设置

usermod -aG docker root

#重载配置，重启docker服务

systemctl daemon-reloadsystemctl restart docker

说明：以下为AWS服务器的环境，AWS服务器则执行以下命令进行docker安装

#更新yum源

sudo yum update -y

#安装docker

sudo amazon-linux-extras install docker

#启动docker

sudo service docker start

二、配置docker对外端口

#安装好docker之后还需要对外暴露接口

vim /usr/lib/systemd/system/docker.service

找到 ExecStart=/usr/bin/dockerd在后面添加tcp://0.0.0.0:端口

ExecStart=/usr/bin/dockerd -H tcp://0.0.0.0:9004 -H fd://

重载配置，重启docker

systemctl daemon-reload systemctl restart docker

#centos开放端口宿主机访问

firewall-cmd --add-port=9004/tcp --permanentfirewall-cmd --reload

#查询端口是否开启命令

firewall-cmd --query-port=9004/tcp

#除此之外还可以开机自启动，将firewalld起起来即可，并且允许其自启动

systemctl start firewalld systemctl enable firewalld

#如果出现Failed to start firewalld.service: Unit is masked.错误则执行以下命令

systemctl unmask firewalld

#浏览器访问，查看docker版本信息

localhost 9004

#如果不小心删除了/var/lib/docker导致后面拉取镜像时报错open /var/lib/docker/tmp/GetImageBlob974299692: no such file or directory，不用改什么操作，重启docker即可

systemctl daemon-reloadsystemctl restart docker

三、安装配置gitlab

#gitlab-ce为稳定版本，后面不填写版本则默认pull最新latest版本

docker pull gitlab/gitlab-ce

#创建gitlab日志,数据,配置的存放路径,通常会在构建容器的时间,会把配置 (etc) 、 日志 (log) 、数据 (data) 放到容器外面,方便后期数据迁移或者修改配置

sudo mkdir -p /docker/gitlab/config /docker/gitlab/logs /docker/gitlab/data

#构建容器

sudo docker run --detach \--hostname gitlab \--publish 8011:443 \--publish 8012:8012 \--publish 8013:22 \--privileged=true \--name gitlab \--restart always \--volume /docker/gitlab/config:/etc/gitlab \--volume /docker/gitlab/logs:/var/log/gitlab \--volume /docker/gitlab/data:/var/opt/gitlab \--volume /docker/gitlab/logs/reconfigure:/var/log/gitlab/reconfigure \gitlab/gitlab-ce:latest

#添加配置

sudo vi /docker/gitlab/config/gitlab.rb

#添加下面3行

#配置'= 'xx.xx.xxx.xxx'#此端口是run时22端口映射的8013端口gitlab_rails['gitlab_shell_ssh_port'] = 8013#保存推出:wq

#看个人需要，一般而已都会限制内存，也可以在docker启动的时候配置，命令为-m 4G

docker update --memory 4096m --memory-swap -1 gitlab

#重启gitlab

docker restart gitlab

#更新授权

sudo docker exec -it gitlab update-permissions

#进入gitlab容器

docker exec -it gitlab bash

#重新载入配置文件，并开启

gitlab-ctl reconfiguregitlab-ctl start

#查看密码

gitlab-rails console production

#进入gitlab控制台

gitlab-rails console -e production

#获得用户数据，修改用户密码

user = User.where(id: 1).firstuser.password='2YkDixw6xJiD/68kCsAZBu9W9ZhGdRlT0YykDYiOvOAE=1'user.password_confirmation='2YkDixw6xJiD/68kCsAZBu9W9ZhGdRlT0YykDYiOvOAE=1'user.save!quit

#重启gitlab需要等待一段时间才能访问，否则会出现502，如果出现502，还有可能是内存不够的原因，建议查看docker容器的gitlab日志

docker restart gitlab

四、安装配置jekins

一、准备工作

#上传jdk到自定义目录，这里提供jdk1.8的linux版本，从官网拉下来的

链接：​​-version

#上传maven到自定义目录，这里提供maven3.8.3的linux版本，从官网拉下来的

链接：​​-v

#关于git其实可以使用默认的git，进入到容器中通过以下命令进行查看git版本

git --version

#当前也可以自行安装git，在docker容器启动的时候配置映射路径，并且在/etc/profile的path路径中添加git安装路径即可，可通过以下命令查看git安装路径

which git

#需要注意的是docker容器每次重新启动，会将容器内部生成的ssh key移除掉，所以我们可以通过映射路径或者复制宿主机的ssh key到容器内部，也可以重新生成然后去到gitlab的ssh key配置。下面的邮箱为你github、gitee或者gitlab登录的邮箱，执行命令之后，连续三次回车即可生成，生成git的ssh key命令：

ssh-keygen -t rsa -C "java_wxid@aliyun.com"

查询生成的ssh key的路径：

cd ~/.ssh

#外部配置的jdk和maven需要映射到jenkins容器，所以相关的配置也需要映射进去，所以需要提前在宿主机配置

vim /etc/profile

#在最后一行添加java环境变量和maven环境变量

#java环境配置export JAVA_HOME=/opt/java/jdkexport JRE_HOME=$JAVA_HOME/jreexport CLASSPATH=./:JAVA_HOME/lib:$JRE_HOME/lib#maven环境配置export M2_HOME=/opt/java/maven#git环境配置export GIT_HOME=/opt/java/git#pathexport PATH=/bin:/usr/bin:/sbin:/usr/sbin:$JAVA_HOME/bin:$M2_HOME/bin:$GIT_HOME/bin:$PATH

#立即重载配置

source /etc/profile

#查看版本信息

mvn -v

二、下载安装配置Jenkins

#下载Jenkins的Docker镜像

docker pull jenkins/jenkins:lts

#创建jenkins工作目录的存放路径

sudo mkdir -p /docker/jenkins/data

#在Docker容器中运行Jenkins

docker run -p 8014:8080 -p 8015:5000 --name jenkins -m 2G \-u root \--restart always \-v /docker/jenkins/data:/var/jenkins_home \-v /etc/localtime:/etc/localtime \-v /usr/local/src/apache-maven-3.8.3:/opt/java/maven \-v /usr/local/src/jdk1.8.0_301:/opt/java/jdk \-v /etc/profile:/etc/profile \-v /root/.ssh/id_rsa:/root/.ssh/id_rsa \-v /var/run/docker.sock:/var/run/docker.sock \-v /bin/docker:/usr/bin/docker \-d jenkins/jenkins:lts

#暂停jenkins

docker stop jenkins

#看个人需要，一般而已都会限制内存，可以在docker启动命令中配置，配置命令为-m 2G

docker update --memory 2048m --memory-swap -1 jenkins

#开启jenkins

docker start jenkins

#进入jenkins容器

docker exec -u 0 -it jenkins /bin/bash

#立即重载配置

source /etc/profile

#查看root密码

cat /var/jenkins_home/secrets/initialAdminPassword

#如果提示cat: /var/jenkins_home/secrets/initialAdminPassword: No such file or directory通过查找文件的方式查看密码

find / -name config.xml

一般会出现：

/var/jenkins_home/users/root_9685925808796613467/config.xml

/var/jenkins_home/config.xml

选择用户名相关的文件：

cat /var/jenkins_home/users/root_9685925808796613467/config.xml

找到passwordHash标签：

#jbcrypt:$2ayB8omAzzWpk1oNToWQPIWewpqBKbhJGUU5UDd470yJCN3HVXqCDc6

密码就在#jbcrypt:后面，即

$2a$10$yB8omAzzWpk1oNToWQPIWewpqBKbhJGUU5UDd470yJCN3HVXqCDc6

我们可以改成：

$2a$10$DdaWzN64JgUtLdvxWIflcuQu2fgrrMSAMabF5TSrGK5nXitqK9ZMS

即密码：111111

或者

#jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq

即密码：123456

使用root用户登录即可

上面那串如何生成的呢？

Jenkins采用Java加密工具jBCrypt，所以我们在生成密码的时候需要添加相关的jar包。

org.mindrot jbcrypt 0.4

// 加密 String admin = BCrypt.hashpw("admin", BCrypt.gensalt()); System.out.println("加密："+admin); // 解密 if(BCrypt.checkpw("admin",admin)){ System.out.println("is match"); } else { System.out.println("is not match"); }

#如果启动容器的时候未设置开机自启动，也可以通过以下命令配置docker的容器开机自启动：docker update --restart=always 镜像ID

docker update --restart=always e39a959d7bff

#重启jenkins

docker restart jenkins

#如果出现jenkins实例已离线的情况，访问以下链接

Site下面替换以下链接

'Asia/Shanghai')

六、项目配置

#创建项目

#编写shell脚本

#!/bin/bash# 制定打包模块arr=(community-starters/community-xxx-starter:8081)#加前缀suffix="-"${BUILD_ENV}#自定义网络ip_param=''echo "当前环境"${BUILD_ENV}#如果执行dev环境，走以下流程if [ ${BUILD_ENV} == "dev" ];then# 如果是在本机上安装就使用内网ip，这样速度会快很多，内网ip查询：ifconfig -a echo 'export DOCKER_HOST="tcp://xxx.17.0.1:8010"' export DOCKER_HOST="tcp://xxx.17.0.1:8010" #通过命令docker network create --driver bridge --subnet=xxx.30.0.0/16 common-network创建自定义网段，docker network inspect common-network进行查看，配置的时候，不要以0结尾，如以下配置即可： ip_param='--ip xxx.30.0.2'fi# for 遍历for mp in ${arr[*]}do #截取字符串获得module名称和端口 path=${mp%:*} module=${path#*/} #arr中配置了端口：8081 port=${mp#*:} #arr中配置了，container_name=community-starters/community-xxx-starter-dev container_name=$module$suffix #arr中配置了，image_name=community-starters/community-xxx-starter-dev image_name=$module$suffix echo "开始构建: "$container_name":"$port CID=$(docker ps -a | grep "$container_name") if [ "$CID" != "" ];then echo "删除现有容器" docker stop $container_name docker rm $container_name fi echo "移除镜像" : $image_name docker rmi $image_name cd $module echo "当前路径" :$(pwd) echo "构建容器": $container_name docker build -t $container_name . echo "启动容器" : $container_name docker run --name $container_name --restart=always -d -p 8081:8081 -p 8082:8082-p 8083:8083 -e TZ=Asia/Bangkok -v /root/fragant/logs:/root/logs:z -v /etc/localtime:/etc/localtime:z -e SPRING_PROFILES_ACTIVE=qa -m 2G $image_name echo "连接容器网络" : $ip_param $container_name docker network connect $ip_param common-network $container_name echo "执行完成" done

内网ip查询

FROM openjdk:8-alpineMAINTAINER community-xx-starterADD target/community-xx-starter.jar /community-xx-starter.jarEXPOSE 8081ENTRYPOINT ["sh","-c","java -jar -Dspring.profiles.active=qa /community-xx-starter.jar"]

进到服务器检出项目的目录，这个时候项目检出并没有打包成jar包，需要手动打包，命令如下：

mvn clean install

如果不成功的话可以尝试使用绝对路径进行调整，例如：

/opt/java/maven/bin/mvn clean install

打包jar包成功之后可以进行自动化部署了

说明：在弄CI流程的时候可能会出现各种问题，比如脚本执行卡住，这个时候可以将脚本中的命令一条条拿到服务器上面执行，排除命令的错误性。比如误删了某个文件，可以进行手动恢复，可参考：Linux系统：第十三章：centos误删文件如何恢复文件数据。比如项目部署成功无法访问，排查项目是否成功运行，对日志进行排查排除项目启动错误导致的无法访问，对网络进行排查排查安全出口和入口等问题。如果觉得jenkins配置太过麻烦，可参考gitlab的CI：Linux系统：第十五章：gitlab集成CI。

博主的心理话：这里还是要吐槽一下，这几天一直在弄二套CI流程（gitlab的ci和jenkins），踩坑无数，目前网络上面太多相同的文章了，搜索出来一页至少超过一半的文章，文章内容一模一样，剩下的就是排版乱的很，看都看不下去的那种，导致找到的解决方法的时间大大延长，希望未来这种环境能够有所改善。

七、jekins迁移到另一台服务器上

#首先本服务器上面的jenkins运行正常，另一台服务器的jenkins也运行正常，需要知道二台服务器上面的安装目录

#找到jenkins_home目录

find / -name jenkins_home

#解压

sudo tar czvf jenkins.tar.gz *

#复制压缩包到新服务器上面去，-i "qt_dev_cert.pem"表示访问目标服务器需要携带私钥，qt_dev_cert.pem表示当前目录下的私钥文件，root@xx.xx.xx.xx 表示root用户，xx.xx.xx.xx表示目标服务器的ip，/var/jenkins_home表示复制到那个目录下面。如果是密码登录则换成-p 密码即可。

scp -p "password" jenkins.tar.gz root@xx.xx.xx.xx:/var/jenkins_home------------------------------------------------------------------------------------scp -i "qt_dev_cert.pem" jenkins.tar.gz root@xx.xx.xx.xx:/var/jenkins_home

#去另一台新服务器解压

tar zxf jenkins.tar.gz

#将解压的文件复制到新服务器的jenkins_home目录里面即可

cp /var/jenkins_home /home/jenkins_home

总结

以上就是今天要讲的内容，本文介绍了安装Docker，下载安装配置gitlab以及jenkins，图文讲解CI流程。

版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。