页面“基于Docker的Jenkins持续集成”与“Jenkins用户手册”之间的差异

来自linux中国网wiki
(页面间的差异)
跳到导航 跳到搜索
 
 
第1行: 第1行:
=ins=
+
这个是当年在 xk给 测试哥看的
站内资源
+
=Jenkins是什么=
 +
why -> what -> how
 +
== why 为什么 选择jenkins==
 +
===用户界面===
 +
我们是用户 当然要说到用户界面 维基百科上的定义 是系统和用户之间进行交互和信息交换的介质
 +
用户界面是介于用户与硬件而设计彼此之间交互沟通相关软件,目的在使得用户能够方便有效率地去操作硬件以达成双向之交互,完成所希望借助硬件完成之工作,用户界面定义广泛,包含了人机交互与图形用户界面,凡参与人类与机械的信息交流的领域都存在着用户界面。
  
[[Jenkins进行持续集成]]
+
===cli===
 +
dev or ops
 +
===gui===
 +
====C/S====
  
[[Jenkins迁移之备份和还原]]
+
====B/S====
  
[[Jenkins自动化构建和部署例子]]
+
Jenkins是 Hadson 的继续。是一款开源CI&CD软件(Continous Integration Server),用于自动化各种任务,包括构建、测试和部署软件.
<pre>
 
  
  
NOTE 注意  国内环境安装完 记得 Jenkins安装插件提速
 
mkdir docker4jenkins
 
cd docker4jenkins
 
#mkdir -p /data/jenkins
 
  
 +
==Jenkins 的突出特点==
 +
开源免费 freedom free 我们就是站在巨人的肩膀上;
  
 +
跨平台,支持所有的平台;
  
vi docker-compose.yml
+
web 形式的可视化的管理页面; 这个就非常好,对非ops 用户  特别是普通用户非常友好,动一下鼠标点一点就行了
  
services:
+
=Thanks=
  jenkins:
+
后端哥 mvn
    #image: jenkins/jenkins:lts
 
    image: jenkins/jenkins:2.235.5-lts-alpine
 
    ports:
 
    - 7099:8080/tcp
 
    - 50000:50000/tcp
 
    environment:
 
      TZ: Asia/Shanghai
 
    restart: always
 
    volumes:
 
    #- /data/jenkins:/var/jenkins_home:rw
 
    - jenkins_home:/var/jenkins_home:rw
 
version: '3.0'
 
volumes:
 
  jenkins_home:
 
    driver: local
 
   
 
   
 
    #run
 
docker-compose  up -d  jenkins
 
   
 
   
 
密码就查看logs
 
  
f47e158768be4c2ba0c891396cf5a55f
+
=使用 Jenkins=
jenkins_1  |
 
jenkins_1  | This may also be found at: /var/jenkins_home/secrets/initialAdminPassword
 
jenkins_1  |
 
   
 
   
 
docker run --name=jenkins -it -u root -d -p 8080:8080 -p 50000:50000 -v /data/jenkins:/var/jenkins_home 3f08dc4f3f5d
 
  
 +
==before==
 +
你们之前是怎么更新的 特别是测试哥的测试环境
  
docker-compose up  -d
+
此处省略去10000字
  
 +
下面开始 我们讲我们after  尽量对用户透明
  
 +
== jenkins做了什么==
  
cat initialAdminPassword
+
其实就是我们要让他做什么 就什么,当然不包括杀人放火,科技以人为本嘛
05765dd93d604cd094b516ba9cc06c1a
 
  
重装要删除volumes  然后要重启 docker
+
git拉代码-->选择相对应的分支,-->开始mvn构建,-->把打包好的war包分发到相对应的服务器,-->执行相对应的运维脚本--> 备份老的 web目录 并把新包解压到新的web目录,重启相对应的tomcat
/home/data/docker/volumes/docker4jenkins_jenkins_home/
 
  
如果默认 在这个目录
+
==登录==
  /var/lib/docker/volumes
+
用你的浏览器(chrome firefox  ie etc ) 填写或复制如下url 并回车 输入你的用户和密码
 +
http://192.168.0.16:9090/
  
 +
==主界面==
 +
用户 和密码输入正确后,你所见到的就是jenkins的主界面
  
 +
===权限===
 +
按项目分,方便用户,并不会出现误操作(操作别人的项目或者删除错)
 +
===job===
 +
我们是以job构建作业作为基本单位来进行的
  
 +
我们几个job的介绍
  
docker-compose up -d
+
选择对应的job --->Build with Parameters(eg origin 2.1.0) --->点击下面的开始构建(maven) --->构建历史 --->#27--->控制台输出(如果想看更多的日志)
ERROR: The Compose file './docker-compose.yml' is invalid because:
 
Unsupported config option for services.jenkins: 'name'
 
  
 +
=====git 分支选择 Build with Parameters =====
  
 +
或者点击最右边的小时钟
  
 +
=====返回面板=====
  
 +
=====工作空间=====
 +
可以查看相对应的源码 和打包好的war包
  
 +
=====状态=====
  
 +
=====Build History 构建历史=====
 +
查看以前的所有构建相关历史
  
不用  volumes 会报错
+
===检验===
[root@prod-cailuw-marke-lvs02 docker4jenkins]# docker logs  7444b6cf02a2
+
打开相对应的URL
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
 
Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions?
 
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
 
Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions?
 
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
 
  
居然再来一次  没有初始化界面 ?
+
====oper 运营后台====
  
firewall-cmd --permanent --add-port=7099/tcp
+
http://120.79.39.154:1080/xtwlztdj_operation_platform/Login/showLogin.do
firewall-cmd --reload 
 
  
还是不通  只能作域名了喽  hostname
+
====商家后台====
 +
http://testshop.zhaituango.com/xtwlztdj_shop_platform/Login/showLogin.do
  
 +
====测试环境 的read 接口====
  
</pre>
+
http://47.106.65.97:1080/xtwlztdj_read_interface/cmd/version
  
= 常用命令=
+
====write ====
重启
+
http://47.106.65.97:2080/xtwlztdj_write_interface/cmd/version
http://localhost:8080/restart  http://localhost:8080/reload
 
=install plugins=
 
==maven==
 
  
=== ins maven===
+
====comm ====
因为jenkins本身不带maven插件,所以需要自己安装下,由于我们的虚拟机中是没有直接安装maven软件的,我们可以在全局工具配置中安装maven, 选择一个合适的版本,勾选自动安装,之后直接保存,需注意的是,现在jenkins并不会立即给你安装maven软件
+
http://47.106.65.97:3080/xtwlztdj_universal_interface/cmd/version
  
这是要做的动作 note
+
== 以后==
接下来我们在插件管理中查找maven插件,我们选择好Maven Integration plugin插件,然后点击直接安装
+
向着多快好省的方向 结合我们的业务尽量完善 eg tag
  
===配置maven===
+
==Have fun!==
大家都知道我们要从maven库下载代码需要配置setting.xml,用jenkins时也需要把setting.xml配置好。在目录/docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件
 
 
 
 
 
新建  就可以看到 列表 有 构建一个maven 项目  安装成功
 
 
 
====maven 配置文件  ====
 
<pre>maven 配置  可以在母机修改
 
 
 
/docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件。
 
母机可能的目录
 
/home/data/docker/volumes/docker4jenkins_jenkins_home/_data/tools/hudson.tasks.Maven_MavenInstallation/maven3.6.2/conf</pre>
 
 
 
==JDK==
 
<pre>
 
1.JDK和JRE的区别
 
JRE: Java Runtime Environment
 
JDK:Java Development Kit
 
 
 
JRE顾名思义是java运行时环境,包含了java虚拟机,java基础类库。是使用java语言编写的程序运行所需要的软件环境,是提供给想运行java程序的用户使用的。
 
JDK顾名思义是java开发工具包,是程序员使用java语言编写java程序所需的开发工具包,是提供给程序员使用的。JDK包含了JRE,同时还包含了编译java源码的编译器javac,还包含了很多java程序调试和分析的工具:jconsole,jvisualvm等工具软件,还包含了java程序编写所需的文档和demo例子程序。
 
如果你需要运行java程序,只需安装JRE就可以了。如果你需要编写java程序,需要安装JDK。
 
 
 
Jenkins-->
 
Update Center-->
 
安装/更新 插件中 ->
 
Oracle Java SE Development Kit Installer
 
可见 oracle jdk安装了
 
 
 
注意,自动安装jdk需要你填入oracle的账号密码,这样Jenkins才能自动帮你到oracle安装。如果没有oracle账号</pre>
 
 
 
[https://blog.csdn.net/anning_88/article/details/50635940 jenkins配置多个JDK]
 
 
 
==ssh plgins==
 
<pre>
 
--> Manager plugin ->  Publish Over SSH
 
 
 
usage
 
 
 
全局配置 -》SSH Servers
 
Name 可以是别名  hostname 是ip
 
 
ssh 那要添加你的pri key  远程服务器添加pubkey </pre>
 
 
 
[https://tendcode.com/article/Publish-Over-SSH/ 【Jenkins 插件】使用 Publish Over SSH 远程传输文件和自动部署]
 
 
 
==dokcer 插件 ==
 
为了发布 docker
 
== git 用户 ==
 
<pre>
 
系统-->凭证
 
Enter directly ->Key   添加 pri key
 
 
 
 
 
要在 Key 框里添加你的 pri key 不然会出这报错
 
Failed to connect to repository : Command "git ls-remote -h ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git HEAD" returned status code 128:
 
stdout:
 
stderr: Permission denied (publickey).
 
fatal: Could not read from remote repository.
 
 
 
Please make sure you have the correct access rights
 
and the repository exists.
 
 
 
 
 
行情改成这样的 git
 
 
 
ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git
 
 
 
</pre>
 
 
 
==python plugin==
 
Jenkins 执行python脚本 安装如下两个 plugin
 
 
 
  python_plugin    python_wrapper_plugin
 
 
 
任务中添加python脚本即可,点击保存时候,自动会在下图中目录生成.py文件
 
[https://cloud.tencent.com/developer/article/1566505 jenkins执行python脚本的方法]
 
 
 
=生成SSHKey=
 
 
 
<pre>先进入容器
 
 
 
docker exec -it jenkins /bin/bash
 
进入容器后生成sshkey
 
 
 
ssh-keygen -t dsa -C "[email protected]"
 
 
 
获取公钥
 
1.进入容器 
 
2. 直接cat 一下 mount的目录  eg tail /var/lib/docker/volumes/jenkins/_data/.ssh/id_rsa.pub</pre>
 
 
 
=jenkins时区设置=
 
<pre>
 
 
 
【系统管理】-【脚本命令行】里运行
 
System.setProperty('org.apache.commons.jelly.tags.fmt.timeZone', 'Asia/Shanghai')
 
 
 
如果想永久 还是加在 yaml文件里
 
 
 
 
 
时间问题 以前思源的文档有
 
-v /etc/localtime:/etc/localtime 让容器使用和服务器同样的时间设置</pre>
 
 
 
 
 
https://wiki.jenkins.io/display/JENKINS/Change+time+zone
 
 
 
=trouble =
 
 
 
第二天不能登录  这个是输入错了吧 
 
Invalid username or password
 
 
 
 
 
==Jenkins安装插件提速==
 
<pre>
 
 
 
docker-compose  exec  --user root  jenkins  bash
 
 
cd /var/jenkins_home/updates
 
 
sed -i 's#https://updates.jenkins.io/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json
 
 
 
sed -i 's#http://updates.jenkins-ci.org/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json
 
sed -i 's#http://www.google.com#https://www.baidu.com#g' default.json
 
 
 
http://192.168.10.54:7099/restart
 
 
 
重试生效
 
 
 
</pre>
 
https://blog.csdn.net/weixin_43557605/article/details/104587304
 
 
 
==docker-compose 相关文件被删除==
 
处理办法 数据目录(我用了默认的)没被 删除 ,再搞个 docker-compose.yml 文件就行了 和对应目录
 
 
 
==Jenkins忘记密码 ==
 
<pre>
 
 
 
#note 这是基于docker的jenkins
 
jenkins@c58dc265c073:~/users$ pwd
 
/var/jenkins_home/users
 
 
 
cat users.xml
 
<entry>
 
      <string>lxtxadmin</string>
 
      <string>lxtxadmin_7295399102977240796</string>
 
 
 
cd  lxtxadmin_7295399102977240796/
 
 
  cat config.xml  | grep passwordHash
 
      <passwordHash>#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW</passwordHash>
 
 
 
 
 
sed  -i  's!#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW!#jbcrypt:$2a$10$DdaWzN64JgUtLdvxWIflcuQu2fgrrMSAMabF5TSrGK5nXitqK9ZMS!' config.xml
 
 
 
后者是111111的hash值
 
 
 
docker-compose  restart
 
当然 最后记得要改回得比较强的密码喽
 
 
</pre>
 
 
 
[https://www.jianshu.com/p/e8bc90a1aad8 Jenkins - Jenkins 忘记密码]
 
 
 
==该Jenkins实例似乎已离线。 ==
 
<pre>
 
Jenkins 2.176.3
 
 
 
原因  近来网络管理又严格了
 
 
 
updates/default.json
 
 
 
jenkins在下载插件之前会先检查网络连接,其会读取这个文件中的网址。默认是:
 
访问谷歌
 
 
 
处理办法  改成可以直接访问的就行了
 
 
 
jenkins@jenkins-hellotest:~/updates$ pwd
 
/var/jenkins_home/updates
 
 
 
sed  -i 's/google/baidu/' default.json
 
 
 
</pre>
 
 
 
==打开主页空白==
 
<pre>打开 
 
http://192.168.10.214:7099/pluginManager/advanced
 
 
 
最后要恢复回来 ,不然打开主页空白呢
 
http://updates.jenkins.io/update-center.json
 
https://mirrors.tuna.tsinghua.edu.cn/jenkins/updates/update-center.json
 
 
 
/pluginManager/advanced  改回原来的
 
http://updates.jenkins.io/update-center.json
 
 
 
 
 
</pre>
 
 
 
https://blog.csdn.net/harry5508/article/details/91958249
 
 
 
https://www.cnblogs.com/effortsing/p/10013412.html
 
 
 
https://blog.csdn.net/huoyunshen88/article/details/8509886
 
 
 
https://www.jianshu.com/p/1e411d225186
 
  
 
=see also=
 
=see also=
https://hub.docker.com/r/jenkins/jenkins
 
 
[https://www.cnblogs.com/xiaoqi/p/docker-jenkins-cicd.html Docker+Jenkins持续集成环境(1)使用Docker搭建Jenkins+Docker持续集成环境]
 
 
[http://dockone.io/article/2594 Jenkins与Docker的持续集成实践 ]
 
 
http://www.itmuch.com/work/jenkins-in-action/
 
 
[https://blog.csdn.net/xxsstf/article/details/84991931  Jenkins使用, maven插件配置修改]
 
 
[https://www.jianshu.com/p/7883c251eb09 Jenkins+maven+docker 解决项目持续集成]
 
 
[https://www.jianshu.com/p/0391e225e4a6 Docker版本Jenkins的使用]
 
  
[https://dev.to/andresfmoya/install-jenkins-using-docker-compose-4cab Install Jenkins using Docker Compose]
 
  
==learn==
+
[http://cn.jenkins.io/doc/ Jenkins官方用户手册]
[https://www.cnblogs.com/dzblog/category/945869.html Jenkins学习之路]
 
  
[[category:ops]]
+
[[category:ops]]

2020年10月14日 (三) 06:17的最新版本

这个是当年在 xk给 测试哥看的

Jenkins是什么

why -> what -> how

why 为什么 选择jenkins

用户界面

我们是用户 当然要说到用户界面 维基百科上的定义 是系统和用户之间进行交互和信息交换的介质 用户界面是介于用户与硬件而设计彼此之间交互沟通相关软件,目的在使得用户能够方便有效率地去操作硬件以达成双向之交互,完成所希望借助硬件完成之工作,用户界面定义广泛,包含了人机交互与图形用户界面,凡参与人类与机械的信息交流的领域都存在着用户界面。

cli

dev or ops

gui

C/S

B/S

Jenkins是 Hadson 的继续。是一款开源CI&CD软件(Continous Integration Server),用于自动化各种任务,包括构建、测试和部署软件.


Jenkins 的突出特点

开源免费 freedom free 我们就是站在巨人的肩膀上;

跨平台,支持所有的平台;

web 形式的可视化的管理页面; 这个就非常好,对非ops 用户 特别是普通用户非常友好,动一下鼠标点一点就行了

Thanks

后端哥 mvn

使用 Jenkins

before

你们之前是怎么更新的 特别是测试哥的测试环境

此处省略去10000字

下面开始 我们讲我们after 尽量对用户透明

jenkins做了什么

其实就是我们要让他做什么 就什么,当然不包括杀人放火,科技以人为本嘛

git拉代码-->选择相对应的分支,-->开始mvn构建,-->把打包好的war包分发到相对应的服务器,-->执行相对应的运维脚本--> 备份老的 web目录 并把新包解压到新的web目录,重启相对应的tomcat

登录

用你的浏览器(chrome firefox ie etc ) 填写或复制如下url 并回车 输入你的用户和密码 http://192.168.0.16:9090/

主界面

用户 和密码输入正确后,你所见到的就是jenkins的主界面

权限

按项目分,方便用户,并不会出现误操作(操作别人的项目或者删除错)

job

我们是以job构建作业作为基本单位来进行的

我们几个job的介绍

选择对应的job --->Build with Parameters(eg origin 2.1.0) --->点击下面的开始构建(maven) --->构建历史 --->#27--->控制台输出(如果想看更多的日志)

git 分支选择 Build with Parameters

或者点击最右边的小时钟

返回面板
工作空间

可以查看相对应的源码 和打包好的war包

状态
Build History 构建历史

查看以前的所有构建相关历史

检验

打开相对应的URL

oper 运营后台

http://120.79.39.154:1080/xtwlztdj_operation_platform/Login/showLogin.do

商家后台

http://testshop.zhaituango.com/xtwlztdj_shop_platform/Login/showLogin.do

测试环境 的read 接口

http://47.106.65.97:1080/xtwlztdj_read_interface/cmd/version

write

http://47.106.65.97:2080/xtwlztdj_write_interface/cmd/version

comm

http://47.106.65.97:3080/xtwlztdj_universal_interface/cmd/version

以后

向着多快好省的方向 结合我们的业务尽量完善 eg tag

Have fun!

see also

Jenkins官方用户手册