基于Docker的Jenkins持续集成
目录
install
gitlab→jenkins→registry→kubernetes→docker
站内资源
Jenkins进行持续集成 相关配置的看这个吧
NOTE 注意 国内环境安装完 记得 Jenkins安装插件提速 在后面章节哦
/data/apps/jenkins mkdir docker4jenkins cd docker4jenkins #mkdir -p /data/jenkins vi docker-compose.yml services: jenkins: #image: jenkins/jenkins:lts image: jenkins/jenkins:2.235.5-lts-alpine #image: jenkins/jenkins:2.190.3-alpine #202011 迁移用的版本 可以跑phing2.16 ports: - 7099:8080/tcp - 50000:50000/tcp environment: TZ: Asia/Shanghai restart: always volumes: #- /data/jenkins:/var/jenkins_home:rw - jenkins_home:/var/jenkins_home:rw version: '3.0' volumes: jenkins_home: driver: local #run docker-compose up -d jenkins
install config
打开 url 时行 初始化 记住 若是自定义了用户名 注意 如果在初始化时用了自定义的名,就不要选择下面第一个 有admin字样的选项了 可能要改的变量 这里我加了2021 还有暴露给母鸡的端口也可能要改 如果一台机器有多个 jenkins restart: always volumes: #- /data/jenkins:/var/jenkins_home:rw - jenkins_home2021:/var/jenkins_home:rw version: '3.0' volumes: jenkins_home2021: driver: local 密码就查看logs f47e158768be4c2ba0c891396cf5a55f jenkins_1 | jenkins_1 | This may also be found at: /var/jenkins_home/secrets/initialAdminPassword jenkins_1 | docker run --name=jenkins -it -u root -d -p 8080:8080 -p 50000:50000 -v /data/jenkins:/var/jenkins_home 3f08dc4f3f5d docker-compose up -d cat initialAdminPassword 05765dd93d604cd094b516ba9cc06c1a ng cat ci.conf server { listen 80; server_name market-ci.com; location / { proxy_pass http://172.31.127.223:7099; proxy_set_header X-Real-IP $remote_addr; proxy_set_header Host $host; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; } } 重装要删除volumes 然后要重启 docker /home/data/docker/volumes/docker4jenkins_jenkins_home/ 如果默认 在这个目录 /var/lib/docker/volumes docker-compose up -d ERROR: The Compose file './docker-compose.yml' is invalid because: Unsupported config option for services.jenkins: 'name' 不用 volumes 会报错 [root@prod-cailuw-marke-lvs02 docker4jenkins]# docker logs 7444b6cf02a2 touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions? touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions? touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied 居然再来一次 没有初始化界面 ? firewall-cmd --permanent --add-port=7099/tcp firewall-cmd --reload 还是不通 只能作域名了喽 hostname
alpine jenkins
Jenkins实践基础:Alpine版Jenkins(LTS版)
常用命令
重启 http://localhost:8080/restart http://localhost:8080/reload
常用参数
Transfers set Remote directory 填写 tempjar 如果是用root用户 那就是 /root/tempjar/ 有些项目改了 绝对路径居然是不行的
install plugins
maven
ins maven
因为jenkins本身不带maven插件,所以需要自己安装下,由于我们的虚拟机中是没有直接安装maven软件的,我们可以在全局工具配置中安装maven, 选择一个合适的版本,勾选自动安装,之后直接保存,需注意的是,现在jenkins并不会立即给你安装maven软件
这是要做的动作 note 接下来我们在插件管理中查找maven插件,我们选择好Maven Integration plugin插件,然后点击直接安装
配置maven
大家都知道我们要从maven库下载代码需要配置setting.xml,用jenkins时也需要把setting.xml配置好。在目录/docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件
新建 就可以看到 列表 有 构建一个maven 项目 安装成功
maven 配置文件
maven 配置 可以在母机修改 /docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件。 母机可能的目录 /home/data/docker/volumes/docker4jenkins_jenkins_home/_data/tools/hudson.tasks.Maven_MavenInstallation/maven3.6.2/conf
JDK
1.JDK和JRE的区别 JRE: Java Runtime Environment JDK:Java Development Kit JRE顾名思义是java运行时环境,包含了java虚拟机,java基础类库。是使用java语言编写的程序运行所需要的软件环境,是提供给想运行java程序的用户使用的。 JDK顾名思义是java开发工具包,是程序员使用java语言编写java程序所需的开发工具包,是提供给程序员使用的。JDK包含了JRE,同时还包含了编译java源码的编译器javac,还包含了很多java程序调试和分析的工具:jconsole,jvisualvm等工具软件,还包含了java程序编写所需的文档和demo例子程序。 如果你需要运行java程序,只需安装JRE就可以了。如果你需要编写java程序,需要安装JDK。 Jenkins--> Update Center--> 安装/更新 插件中 -> Oracle Java SE Development Kit Installer 可见 oracle jdk安装了 注意,自动安装jdk需要你填入oracle的账号密码,这样Jenkins才能自动帮你到oracle安装。如果没有oracle账号
ssh plgins
--> Manager plugin -> Publish Over SSH usage 全局配置 -》SSH Servers Name 可以是别名 hostname 是ip ssh 那要添加你的pri key 远程服务器添加pubkey
【Jenkins 插件】使用 Publish Over SSH 远程传输文件和自动部署
dokcer 插件
为了发布 docker
git 用户
系统-->凭证 Enter directly ->Key 添加 pri key 要在 Key 框里添加你的 pri key 不然会出这报错 Failed to connect to repository : Command "git ls-remote -h ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git HEAD" returned status code 128: stdout: stderr: Permission denied (publickey). fatal: Could not read from remote repository. Please make sure you have the correct access rights and the repository exists. 行情改成这样的 git ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git
数据库更新
liquibase
使用 LiquiBase 管理数据库变更 数据库版本管理(含与Spring Boot Gradle Liquibase 插件整合的demo)
python plugin
Jenkins 执行python脚本 安装如下两个 plugin
python_plugin python_wrapper_plugin
任务中添加python脚本即可,点击保存时候,自动会在下图中目录生成.py文件 jenkins执行python脚本的方法
生成SSHKey
先进入容器 docker exec -it jenkins /bin/bash 进入容器后生成sshkey ssh-keygen -t dsa -C "[email protected]" 获取公钥 1.进入容器 2. 直接cat 一下 mount的目录 eg tail /var/lib/docker/volumes/jenkins/_data/.ssh/id_rsa.pub
jenkins时区设置
【系统管理】-【脚本命令行】里运行 System.setProperty('org.apache.commons.jelly.tags.fmt.timeZone', 'Asia/Shanghai') 如果想永久 还是加在 yaml文件里 时间问题 以前思源的文档有 -v /etc/localtime:/etc/localtime 让容器使用和服务器同样的时间设置
https://wiki.jenkins.io/display/JENKINS/Change+time+zone
trouble
第二天不能登录 这个是输入错了吧 Invalid username or password
迁移 jenkins 要注意的
java.io.IOException: Cannot run program "/var/jenkins_home/tools/hudson.model.JDK/jdk/bin/java" (in directory "/var/jenkins_home/workspace/pro-cailu-market"): error=2, No such file or directory maven 要重新 配置 全局-->maven 安装 hudson.AbortException: Unable to install JDK unless a valid username/password is provided. 填写 oracle用户和密码 原来 用户 密码是oracle提供的 http://market-ci.com/descriptorByName/hudson.tools.JDKInstaller/enterCredential 要重新添加 git 用户 和密码 Remote directory 填写 tempjar 如果是用root用户 那就是 /root/tempjar/
Jenkins安装插件提速 插件换源
现在感觉不改更快 docker-compose exec --user root jenkins bash find / -name default.json #如果是原生的安装 cd /var/jenkins_home/updates sed -i 's#https://updates.jenkins.io/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json sed -i 's#http://updates.jenkins-ci.org/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json sed -i 's#http://www.google.com#https://www.baidu.com#g' default.json 重启生效 docker-compose restart jenkins #不用下面这个吧 http://192.168.10.54:7099/restart
https://blog.csdn.net/weixin_43557605/article/details/104587304
docker-compose 相关文件被删除
处理办法 数据目录(我用了默认的)没被 删除 ,再搞个 docker-compose.yml 文件就行了 和对应目录
Jenkins忘记密码
#2021 试过有效果 /var/jenkins_home/users/admin/config.xml 新版本 jenkins_jenkins_home/_data/users/admin_1216381497456990300 cat config.xml | grep passwordHash <passwordHash>#jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq</passwordHash> 123456加密后: #jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq 修改 /users/admin/comfig.xml 文件后,保存重新启动Jenkins程序。 再以用户名admin 密码123456 成功登录 #note 这是基于docker的jenkins jenkins@c58dc265c073:~/users$ pwd /var/jenkins_home/users cat users.xml <entry> <string>lxtxadmin</string> <string>lxtxadmin_7295399102977240796</string> cd lxtxadmin_7295399102977240796/ cat config.xml | grep passwordHash <passwordHash>#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW</passwordHash> #jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq 123456 这个写法有问题啦 前面不是固定的啦 sed -i 's!#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW!#jbcrypt:$2a$10$DdaWzN64JgUtLdvxWIflcuQu2fgrrMSAMabF5TSrGK5nXitqK9ZMS!' config.xml 后者是111111的hash值 6个1 docker-compose restart 当然 最后记得要改回得比较强的密码喽
该Jenkins实例似乎已离线。
Jenkins 2.176.3 原因 近来网络管理又严格了 updates/default.json jenkins在下载插件之前会先检查网络连接,其会读取这个文件中的网址。默认是: 访问谷歌 处理办法 改成可以直接访问的就行了 jenkins@jenkins-hellotest:~/updates$ pwd /var/jenkins_home/updates sed -i 's/google/baidu/' default.json
打开主页空白
打开 http://192.168.10.214:7099/pluginManager/advanced 最后要恢复回来 ,不然打开主页空白呢 http://updates.jenkins.io/update-center.json https://mirrors.tuna.tsinghua.edu.cn/jenkins/updates/update-center.json /pluginManager/advanced 改回原来的 http://updates.jenkins.io/update-center.json
https://blog.csdn.net/harry5508/article/details/91958249
https://www.cnblogs.com/effortsing/p/10013412.html
https://blog.csdn.net/huoyunshen88/article/details/8509886
https://www.jianshu.com/p/1e411d225186
web打不开 wrapper Up (unhealthy)
重启并等 一下下 过程如下 docker-compose ps Name Command State Ports ------------------------------------------------------------------------------------------------------------------- gitlab_web_1 /assets/wrapper Up (unhealthy) 0.0.0.0:2222->22/tcp, 0.0.0.0:4433->443/tcp, 0.0.0.0:7080->80/tcp root@jenkins2020:/data/apps/gitlab# docker-compose restart Restarting gitlab_web_1 ... done root@jenkins2020:/data/apps/gitlab# docker-compose ps Name Command State Ports -------------------------------------------------------------------------------------------------------------------------- gitlab_web_1 /assets/wrapper Up (health: starting) 0.0.0.0:2222->22/tc docker-compose ps Name Command State Ports ----------------------------------------------------------------------------------------------------------------- gitlab_web_1 /assets/wrapper Up (healthy) 0.0.0.0:2222->22/tcp, 0.0.0.0:4433->443/tcp, 0.0.0.0:7080->80/tcp root@jenkins2020:/data/apps/gitlab#
删除home数据目录
mkdir -p /var/lib/docker/volumes/jenkins_jenkins_home/_data #可能要创建回去
see also
https://hub.docker.com/r/jenkins/jenkins
Docker+Jenkins持续集成环境(1)使用Docker搭建Jenkins+Docker持续集成环境
http://www.itmuch.com/work/jenkins-in-action/
Install Jenkins using Docker Compose