页面“Gitlab社区版安装和配置”与“基于Docker的Jenkins持续集成”之间的差异

来自linux中国网wiki
（页面间的差异）
跳到导航 跳到搜索
 
 
第1行： 第1行：
 +
=install=
 +
站内资源
  
−
== pre ==
+
[[Jenkins进行持续集成]]
  
−
gitlab社区版安装和配置
+
[[Jenkins迁移之备份和还原]]
  
−
os: centos6.X
+
[[Jenkins自动化构建和部署例子]]
  
−
==第零 docker-compose for gitlab 　==
+
 
 +
NOTE 注意  国内环境安装完 记得 Jenkins安装插件提速 在后面章节哦
 
<pre>
 
<pre>
 +
/data/apps/jenkins
 +
 +
mkdir docker4jenkins
 +
cd docker4jenkins
 +
#mkdir -p /data/jenkins
 +
 +
 +
 +
vi docker-compose.yml
 +
 +
services:
 +
  jenkins:
 +
    #image: jenkins/jenkins:lts
 +
    image: jenkins/jenkins:2.235.5-lts-alpine
 +
    ports:
 +
    - 7099:8080/tcp
 +
    - 50000:50000/tcp
 +
    environment:
 +
      TZ: Asia/Shanghai
 +
    restart: always
 +
    volumes:
 +
    #- /data/jenkins:/var/jenkins_home:rw
 +
    - jenkins_home:/var/jenkins_home:rw
 +
version: '3.0'
 +
volumes:
 +
  jenkins_home:
 +
    driver: local
 +
   
 +
   
 +
    #run
 +
docker-compose  up -d  jenkins
 +
   
 +
   
 +
密码就查看logs
 +
 +
f47e158768be4c2ba0c891396cf5a55f
 +
jenkins_1  |
 +
jenkins_1  | This may also be found at: /var/jenkins_home/secrets/initialAdminPassword
 +
jenkins_1  |
 +
   
 +
   
 +
docker run --name=jenkins -it -u root -d -p 8080:8080 -p 50000:50000 -v /data/jenkins:/var/jenkins_home 3f08dc4f3f5d
 +
 +
 +
docker-compose up  -d
 +
 +
 +
 +
cat initialAdminPassword
 +
05765dd93d604cd094b516ba9cc06c1a
 +
 +
ng
  
 +
cat ci.conf
 +
  server {
 +
        listen      80;
 +
        server_name  market-ci.com;
 +
  
−
2020 直接 docker-compose 其实可以上 alpine的
+
        location / {
 +
            proxy_pass http://172.31.127.223:7099;
 +
            proxy_set_header X-Real-IP $remote_addr;
 +
            proxy_set_header Host $host;
 +
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
 +
         
 +
        }
 +
    }
  
−
cat docker-compose.yml
 
  
  
−
web:
+
重装要删除volumes 然后要重启 docker
−
  image: 'gitlab/gitlab-ce:11.4.3'
+
/home/data/docker/volumes/docker4jenkins_jenkins_home/
−
  #image: 'gitlab/gitlab-ce:latest'  
 
−
  restart: always
 
−
  hostname: 'mygitlab'
 
−
  environment:
 
−
    GITLAB_OMNIBUS_CONFIG: |
 
−
      external_url 'http://gitlab.lliao.net'
 
−
      #external_url 'https://mygitlab.com'
 
−
      # Add any other gitlab.rb configuration here, each on its own line
 
−
  ports:
 
−
    - '7080:80'
 
−
    - '4433:443'
 
−
    - '2222:22'
 
−
  volumes:
 
−
    - ./gitlab/config:/etc/gitlab
 
−
    - ./gitlab/logs:/var/log/gitlab
 
−
    - ./gitlab/data:/var/opt/gitlab
 
  
 +
如果默认 在这个目录
 +
  /var/lib/docker/volumes
  
  
  
  
 +
docker-compose up -d
 +
ERROR: The Compose file './docker-compose.yml' is invalid because:
 +
Unsupported config option for services.jenkins: 'name'
  
  
−
#这个手工的 线上一般不用了 以前学习用的
 
  
−
获取 GitLab 镜像
 
−
docker search gitlab
 
  
−
docker pull gitlab/gitlab-ce:latest
 
  
−
查看本地镜像
 
−
docker images
 
  
−
创建目录
 
  
−
mkdir -p /data/gitlab/{config,data,logs}
+
不用  volumes 会报错
 +
[root@prod-cailuw-marke-lvs02 docker4jenkins]# docker logs  7444b6cf02a2
 +
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
 +
Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions?
 +
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
 +
Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions?
 +
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
  
−
创建并运行容器
+
居然再来一次  没有初始化界面 ？
  
−
docker run --detach \
+
firewall-cmd --permanent --add-port=7099/tcp
−
      --hostname git.evan.com \
+
firewall-cmd --reload 
−
      --publish 443:443 \
 
−
      --publish 80:80 \
 
−
      --publish 222:22 \
 
−
      --name gitlabce\
 
−
      --restart always \
 
−
      --volume /data/gitlab/config:/etc/gitlab \
 
−
      --volume /data/gitlab/logs:/var/log/gitlab \
 
−
      --volume /data/gitlab/data:/var/opt/gitlab \
 
−
      gitlab/gitlab-ce:latest
 
  
 +
还是不通  只能作域名了喽  hostname
  
−
查看运行状态
 
  
−
docker ps
+
</pre>
−
netstat -ntulap | grep docker
 
−
访问 GitLab
 
  
−
启动
+
= 常用命令=
−
docker start gitlabce
+
重启
 +
http://localhost:8080/restart  http://localhost:8080/reload
 +
=常用参数=
 +
<pre>
  
−
docker stop gitlabce
+
Transfers set 
  
−
http://git.evan.com/
+
Remote directory
 +
填写 tempjar  如果是用root用户 那就是 /root/tempjar/
  
−
如果没有域名，直接使用 IP 访问即可。
+
有些项目改了 绝对路径居然是不行的
−
初始账户
 
  
−
用户: root
 
−
密码: 5iveL!fe  现在一般要自己配置密码的了
 
  
 
</pre>
 
</pre>
  
−
[https://docs.gitlab.com/ee/install/docker.html  Install GitLab with Docker]
+
=install plugins=
 +
==maven==
 +
 
 +
=== ins maven===
 +
因为jenkins本身不带maven插件，所以需要自己安装下，由于我们的虚拟机中是没有直接安装maven软件的，我们可以在全局工具配置中安装maven， 选择一个合适的版本，勾选自动安装，之后直接保存，需注意的是，现在jenkins并不会立即给你安装maven软件
 +
 
 +
这是要做的动作 note
 +
接下来我们在插件管理中查找maven插件，我们选择好Maven Integration plugin插件，然后点击直接安装
 +
 
 +
===配置maven===
 +
大家都知道我们要从maven库下载代码需要配置setting.xml，用jenkins时也需要把setting.xml配置好。在目录/docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件
 +
 
 +
 
 +
新建  就可以看到 列表 有 构建一个maven 项目  安装成功
 +
 
 +
====maven 配置文件  ====
 +
<pre>maven 配置  可以在母机修改
 +
 
 +
/docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件。
 +
母机可能的目录
 +
/home/data/docker/volumes/docker4jenkins_jenkins_home/_data/tools/hudson.tasks.Maven_MavenInstallation/maven3.6.2/conf</pre>
 +
 
 +
==JDK==
 +
<pre>
 +
1.JDK和JRE的区别
 +
JRE： Java Runtime Environment
 +
JDK：Java Development Kit
 +
 
 +
JRE顾名思义是java运行时环境，包含了java虚拟机，java基础类库。是使用java语言编写的程序运行所需要的软件环境，是提供给想运行java程序的用户使用的。
 +
JDK顾名思义是java开发工具包，是程序员使用java语言编写java程序所需的开发工具包，是提供给程序员使用的。JDK包含了JRE，同时还包含了编译java源码的编译器javac，还包含了很多java程序调试和分析的工具：jconsole，jvisualvm等工具软件，还包含了java程序编写所需的文档和demo例子程序。
 +
如果你需要运行java程序，只需安装JRE就可以了。如果你需要编写java程序，需要安装JDK。
 +
 
 +
Jenkins-->
 +
Update Center-->
 +
安装/更新 插件中 ->
 +
Oracle Java SE Development Kit Installer
 +
可见 oracle jdk安装了
 +
 
 +
注意，自动安装jdk需要你填入oracle的账号密码，这样Jenkins才能自动帮你到oracle安装。如果没有oracle账号</pre>
 +
 
 +
[https://blog.csdn.net/anning_88/article/details/50635940 jenkins配置多个JDK]
  
−
==gitlab搭配ssh默认端口引发的问题  ==
+
==ssh plgins==
 
<pre>
 
<pre>
−
明明 docker-compose.yml 用 了222端口但还是有问题
+
--> Manager plugin -> Publish Over SSH
 +
 
 +
usage
  
 +
全局配置 -》SSH Servers
 +
Name 可以是别名  hostname 是ip
 +
 +
ssh 那要添加你的pri key  远程服务器添加pubkey </pre>
  
 +
[https://tendcode.com/article/Publish-Over-SSH/ 【Jenkins 插件】使用 Publish Over SSH 远程传输文件和自动部署]
 +
 +
==dokcer 插件 ==
 +
为了发布 docker
 +
== git 用户 ==
 +
<pre>
 +
系统-->凭证
 +
Enter directly ->Key   添加 pri key
  
−
修改sshd_config中的Port
 
  
−
service sshd restart
+
要在 Key 框里添加你的 pri key 不然会出这报错
 +
Failed to connect to repository : Command "git ls-remote -h ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git HEAD" returned status code 128:
 +
stdout:
 +
stderr: Permission denied (publickey).
 +
fatal: Could not read from remote repository.
  
−
#第一步的我没改哦 好像可以不动
+
Please make sure you have the correct access rights
−
修改/etc/gitlab/gitlab.rb [再次声明，gitlab.yml中的配置会被这个给覆盖]
+
and the repository exists.
  
−
启用下面这行，并把端口改为自己服务器的sshd端口
 
  
−
gitlab_rails['gitlab_shell_ssh_port'] = 50022
+
行情改成这样的 git
  
−
使之生效，大功告其！
+
ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git
  
−
gitlab-ctl reconfigure
 
 
</pre>
 
</pre>
  
 +
==python plugin==
 +
Jenkins 执行python脚本 安装如下两个 plugin
 +
 +
  python_plugin    python_wrapper_plugin
  
 +
任务中添加python脚本即可，点击保存时候，自动会在下图中目录生成.py文件
 +
[https://cloud.tencent.com/developer/article/1566505 jenkins执行python脚本的方法]
  
−
== 第一种 Install and configure the necessary dependencies ==
+
=生成SSHKey=
−
<pre>进入gitlab官方网站,选择对应的操作系统——CentOS 6 (and RedHat/Oracle/Scientific Linux 6),
 
−
https://about.gitlab.com/downloads/#centos6
 
  
−
按照官方的提示进行安装：
+
<pre>先进入容器
−
安装配置必要的依赖
 
−
在Centos 6 和 7 中，以下的命令将会打开HTTP和SSH在系统防火墙中的可访问权限。
 
  
−
#sudo lokkit -s http -s ssh
+
docker exec -it jenkins /bin/bash
 +
进入容器后生成sshkey
  
 +
ssh-keygen -t dsa -C "[email protected]"
  
 +
获取公钥
 +
1.进入容器 
 +
2. 直接cat 一下 mount的目录  eg tail /var/lib/docker/volumes/jenkins/_data/.ssh/id_rsa.pub</pre>
  
 +
=jenkins时区设置=
 +
<pre>
  
 +
【系统管理】-【脚本命令行】里运行
 +
System.setProperty('org.apache.commons.jelly.tags.fmt.timeZone', 'Asia/Shanghai')
  
−
[gitlab-ce]
+
如果想永久 还是加在 yaml文件里
−
name=gitlab-ce
 
−
baseurl=http://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el6
 
−
repo_gpgcheck=0
 
−
gpgcheck=0
 
−
enabled=1
 
−
gpgkey=https://packages.gitlab.com/gpg.key
 
  
  
−
sudo yum makecache
+
时间问题 以前思源的文档有
 +
-v /etc/localtime:/etc/localtime 让容器使用和服务器同样的时间设置</pre>
  
−
# 安装依赖包
 
−
sudo yum install curl openssh-server openssh-clients postfix cronie
 
−
# 启动 postfix 邮件服务
 
−
sudo service postfix start
 
−
# 检查 postfix
 
−
sudo chkconfig postfix on
 
−
# 安装 GitLab 社区版
 
−
sudo yum install gitlab-ce
 
−
# 初始化 GitLab 配置并启动GitLab
 
−
打开/etc/gitlab/gitlab.rb,将external_url = ‘http://git.example.com’修改为自己的IP地址：http://xxx.xx.xxx.xx,，然后执行下面的命令，对GitLab进行编译。
 
  
 +
https://wiki.jenkins.io/display/JENKINS/Change+time+zone
  
 +
=trouble =
  
 +
第二天不能登录  这个是输入错了吧 
 +
Invalid username or password
 +
== 迁移 jenkins 要注意的==
 +
<pre>
  
 +
java.io.IOException: Cannot run program "/var/jenkins_home/tools/hudson.model.JDK/jdk/bin/java" (in directory "/var/jenkins_home/workspace/pro-cailu-market"): error=2, No such file or directory
 +
maven
 +
要重新 配置  全局-->maven 安装 
  
−
sudo gitlab-ctl reconfigure
 
−
一直都有更新的。
 
  
 +
hudson.AbortException: Unable to install JDK unless a valid username/password is provided.
  
 +
填写 oracle用户和密码 原来  用户 密码是oracle提供的
  
−
sudo gitlab-ctl reconfigure
+
http://market-ci.com/descriptorByName/hudson.tools.JDKInstaller/enterCredential
−
登录GitLab
 
−
Username: root
 
−
Password: 5iveL!fe
 
  
 +
要重新添加 git 用户 和密码
  
  
  
 +
Remote directory
 +
填写 tempjar  如果是用root用户 那就是 /root/tempjar/
  
−
我在ubuntu下的一键安装，如果用汉化版的有问题的。
+
</pre>
−
所以现在只能用英文原版的。
 
  
 +
==Jenkins安装插件提速==
 +
<pre>
  
−
现在会要求改密码了 在第一次
+
现在感觉不改更快
  
−
dkm12345678
+
docker-compose  exec  --user root  jenkins  bash
 +
 +
cd /var/jenkins_home/updates
 +
 +
sed -i 's#https://updates.jenkins.io/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json
  
 +
sed -i 's#http://updates.jenkins-ci.org/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json
 +
sed -i 's#http://www.google.com#https://www.baidu.com#g' default.json
  
  
−
git_data_dirs({"default" => "/data/gitlab/git-data"})
+
重启生效  docker-compose restart jenkins
−
/data/gitlab/git-data
+
#不用下面这个吧
 +
http://192.168.10.54:7099/restart
  
−
gitlab-ctl reconfigure </pre>
 
  
−
&nbsp;
 
  
−
== 第二种 Add the GitLab package server and install the package ==
+
</pre>
−
<pre>curl https://packages.gitlab.com/install/repositories/gitlab/gitlab-ce/script.rpm.sh | sudo bash
+
https://blog.csdn.net/weixin_43557605/article/details/104587304
−
sudo yum install gitlab-ce </pre>
 
  
−
&nbsp;
+
==docker-compose 相关文件被删除==
 +
处理办法 数据目录(我用了默认的)没被 删除 ,再搞个 docker-compose.yml 文件就行了 和对应目录
  
−
&nbsp;
+
==Jenkins忘记密码 ==
 +
<pre>
  
 +
#2021 试过有效果
 +
/var/jenkins_home/users/admin/config.xml
  
−
[https://cloud.tencent.com/developer/article/1114666 【gitlab小症状】gitlab搭配ssh默认端口引发的血战]
+
新版本
 +
jenkins_jenkins_home/_data/users/admin_1216381497456990300
  
−
[https://blog.csdn.net/ming19951224/article/details/105479033  docker安装gitlab并使用非标准端口]
+
cat config.xml  | grep passwordHash
 +
      <passwordHash>#jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq</passwordHash>
  
−
==gitlab性能优化调化  占用内存过大问题==
 
−
<pre>
 
  
−
/etc/gitlab/gitlab.rb
+
123456加密后： #jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq
  
−
#进程数目
+
修改 /users/admin/comfig.xml 文件后，保存重新启动Jenkins程序。
−
unicorn['worker_processes'] = 2
 
  
−
#减少数据库缓存 默认为  256M
+
再以用户名admin 密码123456 成功登录
−
postgresql['shared_buffers'] = "128MB"
 
  
 +
#note 这是基于docker的jenkins
 +
jenkins@c58dc265c073:~/users$ pwd
 +
/var/jenkins_home/users
  
−
#减少并发数 默认为8
+
cat users.xml
−
postgresql['max_worker_processes'] = 4
+
<entry>
 +
      <string>lxtxadmin</string>
 +
      <string>lxtxadmin_7295399102977240796</string>
  
 +
cd  lxtxadmin_7295399102977240796/
 +
 +
  cat config.xml  | grep passwordHash
 +
      <passwordHash>#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW</passwordHash>
  
  
−
#减少 sidekiq并发数
+
#jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq 
−
sidekiq['concurrency'] = 20
+
123456
  
 +
这个写法有问题啦  前面不是固定的啦 
 +
sed  -i  's!#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW!#jbcrypt:$2a$10$DdaWzN64JgUtLdvxWIflcuQu2fgrrMSAMabF5TSrGK5nXitqK9ZMS!' config.xml
  
−
#最后  reload
+
后者是111111的hash值 6个1
−
gitlab-ctl reconfigure
 
  
 +
docker-compose  restart
 +
当然 最后记得要改回得比较强的密码喽
 +
 
</pre>
 
</pre>
−
[https://www.dgstack.cn/archives/1951.html gitlab占用内存过大问题]
 
−
 
−
[https://www.cnblogs.com/h--d/p/10153647.html GitLab配置优化及汉化]
 
  
 +
[https://www.jianshu.com/p/e8bc90a1aad8 Jenkins - Jenkins 忘记密码]
  
−
==Gitlab 重置 root 密码==
+
==该Jenkins实例似乎已离线。 ==
 
<pre>
 
<pre>
 +
Jenkins 2.176.3
  
 +
原因  近来网络管理又严格了
  
−
先登录入容器
+
updates/default.json
  
−
要重置root密码，请先使用root权限登录服务器。使用以下命令启动Ruby on Rails控制台：
+
jenkins在下载插件之前会先检查网络连接，其会读取这个文件中的网址。默认是：
 +
访问谷歌
  
−
gitlab-rails console production
+
处理办法  改成可以直接访问的就行了
  
−
等到控制台加载完毕，您可以通过搜索电子邮件或用户名等方法找到您的账号。
+
jenkins@jenkins-hellotest:~/updates$ pwd
 +
/var/jenkins_home/updates
  
−
user = User.where(id: 1).first
+
sed  -i 's/google/baidu/' default.json
  
−
或者
+
</pre>
  
−
user = User.find_by(email: '[email protected]')
+
==打开主页空白==
 +
<pre>打开 
 +
http://192.168.10.214:7099/pluginManager/advanced
  
−
找出用户以后，可以更改其密码：
+
最后要恢复回来 ，不然打开主页空白呢
 +
http://updates.jenkins.io/update-center.json
 +
https://mirrors.tuna.tsinghua.edu.cn/jenkins/updates/update-center.json
  
−
user.password = 12345678
+
/pluginManager/advanced  改回原来的
−
user.password_confirmation = 12345678
+
http://updates.jenkins.io/update-center.json
  
−
user.save!
 
  
−
最后，保存上面的更改，即可使用新密码登录。
 
 
</pre>
 
</pre>
  
−
== 报错 ==
+
https://blog.csdn.net/harry5508/article/details/91958249
−
<pre>================================================================================
+
 
−
Recipe Compile Error in /opt/gitlab/embedded/cookbooks/cache/cookbooks/gitlab/recipes/default.rb
+
https://www.cnblogs.com/effortsing/p/10013412.html
−
================================================================================
+
 
 +
https://blog.csdn.net/huoyunshen88/article/details/8509886
 +
 
 +
https://www.jianshu.com/p/1e411d225186
 +
===web打不开 wrapper  Up (unhealthy) ===
 +
<pre>
 +
重启并等 一下下  过程如下
 +
docker-compose  ps
 +
    Name          Command          State                                      Ports                             
 +
-------------------------------------------------------------------------------------------------------------------
 +
gitlab_web_1  /assets/wrapper  Up (unhealthy)  0.0.0.0:2222->22/tcp, 0.0.0.0:4433->443/tcp, 0.0.0.0:7080->80/tcp
 +
root@jenkins2020:/data/apps/gitlab# docker-compose  restart 
 +
Restarting gitlab_web_1 ... done
 +
root@jenkins2020:/data/apps/gitlab# docker-compose  ps
 +
    Name          Command              State                                        Ports                             
 +
--------------------------------------------------------------------------------------------------------------------------
 +
gitlab_web_1  /assets/wrapper  Up (health: starting)  0.0.0.0:2222->22/tc
  
−
RuntimeError
+
docker-compose  ps
−
------------
+
    Name          Command          State                                    Ports                             
−
GitLab external URL must include a schema and FQDN, e.g. http://gitlab.example.com/
+
-----------------------------------------------------------------------------------------------------------------
 +
gitlab_web_1  /assets/wrapper  Up (healthy)  0.0.0.0:2222->22/tcp, 0.0.0.0:4433->443/tcp, 0.0.0.0:7080->80/tcp
 +
root@jenkins2020:/data/apps/gitlab#
  
−
记得前缀有http样
 
  
 
</pre>
 
</pre>
  
−
[https://mirror.tuna.tsinghua.edu.cn/help/gitlab-ce/ https://mirror.tuna.tsinghua.edu.cn/help/gitlab-ce/]
+
===删除home数据目录===
 +
mkdir  -p /var/lib/docker/volumes/jenkins_jenkins_home/_data #可能要创建回去
 +
 
 +
=see also=
 +
https://hub.docker.com/r/jenkins/jenkins
 +
 
 +
[https://www.cnblogs.com/xiaoqi/p/docker-jenkins-cicd.html Docker+Jenkins持续集成环境（1）使用Docker搭建Jenkins+Docker持续集成环境]
  
−
[https://www.linuxchina.net/?p=2750 https://www.linuxchina.net/?p=2750]
+
[http://dockone.io/article/2594 Jenkins与Docker的持续集成实践 ]
  
−
&nbsp;
+
http://www.itmuch.com/work/jenkins-in-action/
  
−
=see also=
+
[https://blog.csdn.net/xxsstf/article/details/84991931  Jenkins使用， maven插件配置修改]
−
[https://docs.gitlab.com/omnibus/docker/ GitLab Docker images]
 
  
−
[https://my.oschina.net/u/1432614/blog/658568 在 CentOS 7 上使用 Docker 部署安装 GitLab]
+
[https://www.jianshu.com/p/7883c251eb09 Jenkins+maven+docker 解决项目持续集成]
  
−
[https://github.com/beginor/docker-gitlab-ce GitLab 中文社区版 Docker 镜像]
+
[https://www.jianshu.com/p/0391e225e4a6 Docker版本Jenkins的使用]
  
−
[https://gist.github.com/ouyangzhiping/47fcbf26d213146407f2 ouyangzhiping/docker-gitlab.md]
+
[https://dev.to/andresfmoya/install-jenkins-using-docker-compose-4cab Install Jenkins using Docker Compose]
  
−
[https://www.cnblogs.com/weifeng1463/p/7714492.html GitLab的安装及使用教程]
+
==learn==
 +
[https://www.cnblogs.com/dzblog/category/945869.html Jenkins学习之路]
  
−
[[Category:git]] [[Category:ops]]
+
[[category:ops]]

2020年11月23日 (一) 08:19的版本

install

站内资源

Jenkins进行持续集成

Jenkins迁移之备份和还原

Jenkins自动化构建和部署例子


NOTE 注意 国内环境安装完 记得 Jenkins安装插件提速 在后面章节哦 

/data/apps/jenkins

 mkdir docker4jenkins
 cd docker4jenkins 
 #mkdir -p /data/jenkins 



vi docker-compose.yml

services:
  jenkins:
    #image: jenkins/jenkins:lts
    image: jenkins/jenkins:2.235.5-lts-alpine
    ports:
    - 7099:8080/tcp
    - 50000:50000/tcp
    environment:
      TZ: Asia/Shanghai
    restart: always
    volumes:
    #- /data/jenkins:/var/jenkins_home:rw
    - jenkins_home:/var/jenkins_home:rw
version: '3.0'
volumes:
  jenkins_home:
    driver: local
    
    
    #run 
 docker-compose  up -d  jenkins
    
    
密码就查看logs

 f47e158768be4c2ba0c891396cf5a55f
jenkins_1  | 
jenkins_1  | This may also be found at: /var/jenkins_home/secrets/initialAdminPassword
jenkins_1  | 
    
    
docker run --name=jenkins -it -u root -d -p 8080:8080 -p 50000:50000 -v /data/jenkins:/var/jenkins_home 3f08dc4f3f5d


docker-compose up   -d 



cat initialAdminPassword 
05765dd93d604cd094b516ba9cc06c1a

ng 

cat ci.conf 
   server {
        listen       80;
        server_name  market-ci.com;
 

        location / {
            proxy_pass http://172.31.127.223:7099;
            proxy_set_header X-Real-IP $remote_addr;
            proxy_set_header Host $host;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
           
        }
     }



重装要删除volumes  然后要重启 docker 
/home/data/docker/volumes/docker4jenkins_jenkins_home/

如果默认 在这个目录 
  /var/lib/docker/volumes




docker-compose up -d
ERROR: The Compose file './docker-compose.yml' is invalid because:
Unsupported config option for services.jenkins: 'name'







不用  volumes 会报错 
[root@prod-cailuw-marke-lvs02 docker4jenkins]# docker logs  7444b6cf02a2
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions?
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied
Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions?
touch: cannot touch '/var/jenkins_home/copy_reference_file.log': Permission denied

居然再来一次  没有初始化界面 ？

firewall-cmd --permanent --add-port=7099/tcp
firewall-cmd --reload  

还是不通  只能作域名了喽  hostname

常用命令

重启
http://localhost:8080/restart  http://localhost:8080/reload

常用参数


Transfers set  

Remote directory
填写 tempjar  如果是用root用户 那就是 /root/tempjar/

有些项目改了 绝对路径居然是不行的

install plugins

maven

ins maven

因为jenkins本身不带maven插件，所以需要自己安装下，由于我们的虚拟机中是没有直接安装maven软件的，我们可以在全局工具配置中安装maven， 选择一个合适的版本，勾选自动安装，之后直接保存，需注意的是，现在jenkins并不会立即给你安装maven软件

这是要做的动作 note 接下来我们在插件管理中查找maven插件，我们选择好Maven Integration plugin插件，然后点击直接安装

配置maven

大家都知道我们要从maven库下载代码需要配置setting.xml，用jenkins时也需要把setting.xml配置好。在目录/docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件


新建 就可以看到 列表 有 构建一个maven 项目 安装成功

maven 配置文件

maven 配置  可以在母机修改 

/docker/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/jenkins-in-maven/conf下修改setting.xml文件。
母机可能的目录
/home/data/docker/volumes/docker4jenkins_jenkins_home/_data/tools/hudson.tasks.Maven_MavenInstallation/maven3.6.2/conf

JDK

1.JDK和JRE的区别
JRE： Java Runtime Environment 
JDK：Java Development Kit

JRE顾名思义是java运行时环境，包含了java虚拟机，java基础类库。是使用java语言编写的程序运行所需要的软件环境，是提供给想运行java程序的用户使用的。 
JDK顾名思义是java开发工具包，是程序员使用java语言编写java程序所需的开发工具包，是提供给程序员使用的。JDK包含了JRE，同时还包含了编译java源码的编译器javac，还包含了很多java程序调试和分析的工具：jconsole，jvisualvm等工具软件，还包含了java程序编写所需的文档和demo例子程序。 
如果你需要运行java程序，只需安装JRE就可以了。如果你需要编写java程序，需要安装JDK。

Jenkins-->
Update Center-->
安装/更新 插件中 ->
Oracle Java SE Development Kit Installer 
可见 oracle jdk安装了 

注意，自动安装jdk需要你填入oracle的账号密码，这样Jenkins才能自动帮你到oracle安装。如果没有oracle账号

jenkins配置多个JDK

ssh plgins

--> Manager plugin ->  Publish Over SSH 

usage 

全局配置 -》SSH Servers 
	Name 可以是别名  hostname 是ip 
	
ssh 那要添加你的pri key  远程服务器添加pubkey

【Jenkins 插件】使用 Publish Over SSH 远程传输文件和自动部署

dokcer 插件

为了发布 docker

git 用户

 系统-->凭证
 Enter directly ->Key	  添加 pri key


要在 Key 框里添加你的 pri key 不然会出这报错
Failed to connect to repository : Command "git ls-remote -h ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git HEAD" returned status code 128:
stdout:
stderr: Permission denied (publickey).
fatal: Could not read from remote repository.

Please make sure you have the correct access rights
and the repository exists.


行情改成这样的 git 

ssh://[email protected]:2222/lxtx-cailu-java-projects/lxtx-cailu-market.git

python plugin

Jenkins 执行python脚本 安装如下两个 plugin

 python_plugin    python_wrapper_plugin

任务中添加python脚本即可，点击保存时候，自动会在下图中目录生成.py文件 jenkins执行python脚本的方法

生成SSHKey

先进入容器

docker exec -it jenkins /bin/bash
进入容器后生成sshkey

ssh-keygen -t dsa -C "[email protected]"

获取公钥
1.进入容器  
2. 直接cat 一下 mount的目录  eg tail /var/lib/docker/volumes/jenkins/_data/.ssh/id_rsa.pub

jenkins时区设置


【系统管理】-【脚本命令行】里运行
System.setProperty('org.apache.commons.jelly.tags.fmt.timeZone', 'Asia/Shanghai')

如果想永久 还是加在 yaml文件里


时间问题 以前思源的文档有 
-v /etc/localtime:/etc/localtime 让容器使用和服务器同样的时间设置


https://wiki.jenkins.io/display/JENKINS/Change+time+zone

trouble

第二天不能登录 这个是输入错了吧 Invalid username or password

迁移 jenkins 要注意的


java.io.IOException: Cannot run program "/var/jenkins_home/tools/hudson.model.JDK/jdk/bin/java" (in directory "/var/jenkins_home/workspace/pro-cailu-market"): error=2, No such file or directory
maven 
要重新 配置  全局-->maven 安装  


hudson.AbortException: Unable to install JDK unless a valid username/password is provided.

填写 oracle用户和密码 原来  用户 密码是oracle提供的 

http://market-ci.com/descriptorByName/hudson.tools.JDKInstaller/enterCredential

要重新添加 git 用户 和密码



Remote directory
填写 tempjar  如果是用root用户 那就是 /root/tempjar/

Jenkins安装插件提速


现在感觉不改更快 

 docker-compose  exec  --user root   jenkins  bash 
 
 cd /var/jenkins_home/updates
 
sed -i 's#https://updates.jenkins.io/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json

 sed -i 's#http://updates.jenkins-ci.org/download#https://mirrors.tuna.tsinghua.edu.cn/jenkins#g' default.json 
 sed -i 's#http://www.google.com#https://www.baidu.com#g' default.json


重启生效  docker-compose restart jenkins 
#不用下面这个吧
http://192.168.10.54:7099/restart

https://blog.csdn.net/weixin_43557605/article/details/104587304

docker-compose 相关文件被删除

处理办法 数据目录(我用了默认的)没被 删除 ,再搞个 docker-compose.yml 文件就行了 和对应目录

Jenkins忘记密码


#2021 试过有效果 
/var/jenkins_home/users/admin/config.xml

新版本
jenkins_jenkins_home/_data/users/admin_1216381497456990300

 cat config.xml   | grep passwordHash
      <passwordHash>#jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq</passwordHash>


123456加密后： #jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq

修改 /users/admin/comfig.xml 文件后，保存重新启动Jenkins程序。

再以用户名admin 密码123456 成功登录

#note 这是基于docker的jenkins
jenkins@c58dc265c073:~/users$ pwd
/var/jenkins_home/users

cat users.xml
 <entry>
      <string>lxtxadmin</string>
      <string>lxtxadmin_7295399102977240796</string>

 cd  lxtxadmin_7295399102977240796/
 
  cat config.xml   | grep passwordHash
      <passwordHash>#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW</passwordHash>


#jbcrypt:$2a$10$MiIVR0rr/UhQBqT.bBq0QehTiQVqgNpUGyWW2nJObaVAM/2xSQdSq   
123456

这个写法有问题啦  前面不是固定的啦  
sed  -i  's!#jbcrypt:$2a$10$h/LCaTsmNht3F04LbZPsY.OtTyx1e/P7pit6Te7KjGVXkhe/caqyW!#jbcrypt:$2a$10$DdaWzN64JgUtLdvxWIflcuQu2fgrrMSAMabF5TSrGK5nXitqK9ZMS!' config.xml 

后者是111111的hash值 6个1

docker-compose  restart
当然 最后记得要改回得比较强的密码喽

Jenkins - Jenkins 忘记密码

该Jenkins实例似乎已离线。

Jenkins 2.176.3

原因   近来网络管理又严格了 

updates/default.json

jenkins在下载插件之前会先检查网络连接，其会读取这个文件中的网址。默认是：
访问谷歌

处理办法   改成可以直接访问的就行了

jenkins@jenkins-hellotest:~/updates$ pwd
/var/jenkins_home/updates

sed  -i 's/google/baidu/' default.json

打开主页空白

打开   
http://192.168.10.214:7099/pluginManager/advanced

最后要恢复回来 ，不然打开主页空白呢 
http://updates.jenkins.io/update-center.json
https://mirrors.tuna.tsinghua.edu.cn/jenkins/updates/update-center.json

/pluginManager/advanced  改回原来的 
http://updates.jenkins.io/update-center.json

https://blog.csdn.net/harry5508/article/details/91958249

https://www.cnblogs.com/effortsing/p/10013412.html

https://blog.csdn.net/huoyunshen88/article/details/8509886

https://www.jianshu.com/p/1e411d225186

web打不开 wrapper Up (unhealthy)

重启并等 一下下  过程如下 
 docker-compose  ps 
    Name           Command           State                                      Ports                              
-------------------------------------------------------------------------------------------------------------------
gitlab_web_1   /assets/wrapper   Up (unhealthy)   0.0.0.0:2222->22/tcp, 0.0.0.0:4433->443/tcp, 0.0.0.0:7080->80/tcp
root@jenkins2020:/data/apps/gitlab# docker-compose  restart  
Restarting gitlab_web_1 ... done
root@jenkins2020:/data/apps/gitlab# docker-compose  ps 
    Name           Command               State                                         Ports                              
--------------------------------------------------------------------------------------------------------------------------
gitlab_web_1   /assets/wrapper   Up (health: starting)   0.0.0.0:2222->22/tc

 docker-compose  ps 
    Name           Command          State                                     Ports                              
-----------------------------------------------------------------------------------------------------------------
gitlab_web_1   /assets/wrapper   Up (healthy)   0.0.0.0:2222->22/tcp, 0.0.0.0:4433->443/tcp, 0.0.0.0:7080->80/tcp
root@jenkins2020:/data/apps/gitlab#

删除home数据目录

mkdir  -p /var/lib/docker/volumes/jenkins_jenkins_home/_data #可能要创建回去

see also

https://hub.docker.com/r/jenkins/jenkins

Docker+Jenkins持续集成环境（1）使用Docker搭建Jenkins+Docker持续集成环境

Jenkins与Docker的持续集成实践

http://www.itmuch.com/work/jenkins-in-action/

Jenkins使用， maven插件配置修改

Jenkins+maven+docker 解决项目持续集成

Docker版本Jenkins的使用

Install Jenkins using Docker Compose

learn

Jenkins学习之路

取自“http://wiki.linuxchina.net/index.php?title=Gitlab社区版安装和配置&oldid=5238”