【Kubernetes系列】第7篇 CI/CD之组件部署

分类：DevOps作者：编程之家用户

前言

应对敏捷开发的需求，对CI(持续集成))/CD（持续交付）的提出了更高的标准，今天来讨论下，如何基于开源组件（gitlab/jenkins/harbor/kubernetes）使用CI/CD，赋能团队的开发、运维。

核心组件

组件名称 版本 备注
kubernetes v1.15.3 10.0.0.182:6443
jenkins 2.176.2 集群内部署/ namespace: devops
gitlab 11.8 主机部署
harbor v1.7.4 docker-compose部署

基本流程

  1. 在GitLab创建对应的项目。
  2. 开发者将代码提交到GitLab。
  3. Jenkins创建对应的任务（Job），集成该项目的Git地址和Kubernetes集群。
  4. 如有配置钩子，推送（Push）代码会自动触发Jenkins构建，如没有配置钩子，需要手动构建。
  5. Jenkins控制Kubernetes（使用的是Kubernetes插件）创建Jenkins Slave。
  6. Jenkins Slave根据流水线（Pipeline）定义的步骤执行构建。
    1. 检出代码、打包、编译。
    2. 通过Dockerfile生成镜像。
    3. 将镜像提送（Push）到私有Harbor。
    4. Jenkins再次控制Kubernetes进行最新的镜像部署。

注:

  • 上面所述为一般步骤，中间还可能会涉及自动化测试等步骤，可自行根据业务场景添加。
  • 上面流水线步骤一般由应用代码库的根目录下Jenkinsfile决定，Jenkins会自动读取该文件；另外如果需要对具体的应用流水线实施强管控，可以独立管理jenkinsfile模板，然后根据jenkins API接口即时生成流水线。
  • 默认使用的Dockerfile放置在代码仓库的根目录下。

组件部署

  1. kubernetes 第3篇 Kubernetes集群安装部署
  2. gitlab 无忌过招:手把手教你搭建自己的GitLab库
  3. harbor 安装配置指南
  4. jenkins

注: 本文主要说明下jenkins的部署及配置，其他组件如果你部署有问题，欢迎留言。

Jenkins 部署及配置

说明:

  • 以下的yaml文件均在 k8s master节点的 /home/jenkins_deploy目录下，
  • 部署示例的depployment.yaml 的注解
    • nodeName ipaddress , ipaddress 请确认其为一个有效的ip.
    • 示例中jenkins的目录 /var/jenkins_home 是直接挂载到host_path, 如果你有条件，建议替换为共享存储。
    • 因使用的jenkins-master 的基础镜像来自公网，需要k8s maste 节点也要可以访问公网，或者你可以将 jenkins/jenkins:lts-alpine 推送至自己的内网镜像仓库。
  • 部署示例的ingress.yaml 的注解
    • 需要你也需要办公网（集群外）访问，请将jenkins.dev.hanker.net, 改为有效的域名地址，或是你也可以通过NodePort的形式声明 service，就可以直接通过ip:port的形式访问jenkins了。

1. 准备部署yaml

  • deployment.yaml
apiVersion: v1
kind: Namespace
metadata:
  name: devops

# Deployment 
apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: jenkins
  namespace: devops
spec:
  replicas: 1
  revisionHistoryLimit: 3
  template:
    metadata:
      labels:
        app: jenkins
    spec:
      nodeName: 1.1.1.1
      serviceAccountName: jenkins-admin
      containers:
      - image: jenkins/jenkins:lts-alpine
        imagePullPolicy: IfNotPresent
        name: jenkins
        volumeMounts:
        - name: jenkins-volume
          mountPath: /var/jenkins_home
        - name: jenkins-localtime
          mountPath: /etc/localtime
        env:
          - name: JAVA_OPTS
            value: '-Xms256m -Xmx1024m -Duser.timezone=Asia/Shanghai'
          - name: TRY_UPGRADE_IF_NO_MARKER
            value: 'true'
        ports:
        - name: http
          containerPort: 8080
        - name: agent
          containerPort: 50000
        resources:
          requests:
            cpu: 1000m
            memory: 1Gi
          limits:
            cpu: 1200m
            memory: 2Gi
      volumes:
        - name: jenkins-localtime
          hostPath:
            path: /etc/localtime
        - name: jenkins-volume
          hostPath:
            path: /home/jenkins/jenkins_home
  • 配置service, services.yaml
---
apiVersion: v1
kind: Service
metadata:
  name: jenkins-service
  namespace: devops
spec:
  ports:
  - name: http
    protocol: TCP
    port: 8080
    targetPort: 8080
  - port: 50000
    targetPort: 50000
    name: agent
  selector:
    app: jenkins
  • 授权jenkins对k8s的访问 rbac.yaml 
apiVersion: v1
kind: ServiceAccount
metadata:
  labels:
    k8s-app: jenkins
  name: jenkins-admin
  namespace: devops

---

apiVersion: rbac.authorization.k8s.io/v1beta1
kind: ClusterRole
metadata:
  name: jenkins-rbac
  namespace: devops
rules:
  - apiGroups: ["","extensions","app"]
    resources: ["pods","pods/exec","deployments","replicasets"]
    verbs: ["get","list","watch","create","update","patch","delete"]

---

apiVersion: rbac.authorization.k8s.io/v1beta1
kind: ClusterRoleBinding
metadata:
  name: jenkins-admin
  namespace: devops
  labels:
    k8s-app: jenkins
subjects:
  - kind: ServiceAccount
    name: jenkins-admin
    namespace: devops
roleRef:
  kind: ClusterRole
  name: jenkins-rbac
  apiGroup: rbac.authorization.k8s.io
  • 为了便于办公网（集群外）访问，ingress.yaml
apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: jenkins-ingress
  namespace: devops
spec:
  rules:
  - host: jenkins.dev.hanker.net
    http:
      paths:
      - backend:
          serviceName: jenkins-service
          servicePort: 8080
        path: /

2. 应用yaml，部署jenkins

$ pwd
$ /home/jenkins_deploy
$ kubectl apply -f *.yaml

3. 确认jenkins 服务状态

[root@node0 jenkins_deploy]# kubectl -n devops get deployment jenkins
NAME      READY   UP-TO-DATE   AVAILABLE   AGE
jenkins   1/1     1            1           51d
[root@node0 jenkins_deploy]#

4. 访问jenkins 安装插件、设置

注: 步骤1 声明的域名 jenkins.dev.hanker.net 已经解析至ingress，故可直接访问； 如果你也想通过自定义域名访问jenkins，麻请解析至正确的ingress服务节点，即可。

  1. 确认你也已经安装了kubernetes/ kubernetes cli 插件

操作指引： 【Manage Jenkins】 -> 【Manage Plugins】

你应该可以通过类似的指令获取jenkins-master的密码

$ kubectl -n devops exec jenkins-pod-name cat /var/jenkins_home/secrets/initialAdminPassword

【Kubernetes系列】第7篇 CI/CD之组件部署

  1. 配置Kubernetes 插件

操作指引： 【Manage Jenkins】->【Configure System】

【Kubernetes系列】第7篇 CI/CD之组件部署

【Kubernetes系列】第7篇 CI/CD之组件部署

图中标注：

  1. 请修改为你所在环境对应的k8s master
  2. 声明jenkins-agent 的命令空间，也可以根据需要调整；
  3. jenkins-master的访问地址，本示例使用的是 service-name的形式访问。
  4. 测试与k8s分享群的连接情况。如果你获取到『
    Connection test successful』，恭喜你可以继续。
  5. 配置Kubernetes Pod Template

【Kubernetes系列】第7篇 CI/CD之组件部署

图中标注：

  1. 设置基础的jenkins-agent镜像；
  2. 指定工作目录；
    • 如果你需要下载、导出或是缓存构建的话，指定一个为共享存储的目录就很有意义了。
  3. 设置目录挂载
    • 如步骤2如说，你可以将宿主机的目录或是网络存储挂载至jenkins-agent.

原文地址：https://blog.51cto.com/14459446/2445002

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

相关推荐

使用 Amazon DevOps Guru for Serverless 自动检测 Lambda 函数中的运行问题
前言我们于2022年5月宣布推出 AmazonDevOpsGuruforServerless ，这是面向AmazonDevOpsGuru https://aws.amazon.com/devops-guru/的全新功能。通过此功能，开发人员能够提高无服务器应用程序的运行性能和可用性。该产品链接可点击：https://aws.amazon.com/devops-guru/fe
DevOps进阶十二GIT、GITLAB、GITHUB、GITLIB
GIT、GITLAB、GITHUB、GITLIBGit是一款免费、开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。Git是一个开源的分布式版本控制系统，可以有效、高速的处理从很小到非常大的项目版本管理。Github - 一个网站，提供给用户空间创建git仓储，保存用户的一些数据文档或者代码等作为开源代码库以及版本控制系统，Github目前拥有140多万开发者用户。随着越来越...
DevOps进阶十三初识JFrog Artifactory
初识JFrog Artifactory背景在软件项目开发中，一个项目常常依赖于大量的外部库，而这些外部库又在不断的进行版本更新，特别是在当前微服务开发越来越流行的情况下，一个服务依赖于多个服务，如何管理依赖库以及依赖版本，确保开发有序进行呢？JFrog ArtiFactoryArtiFactory是一款二进制存储管理工具，用来管理构建构建工具（如：gradle）等所依赖的二进制仓库，以方...
DevOps进阶十Jenkins组包时解决无法删除文件夹的情况：文件夹正在使用，操作无法完成，因为其中的文件，或文件夹已在另一个程序中打开...
在删除文件夹的时候，可能会遇到文件夹正在使用，操作无法完成，因为其中的文件，或文件夹已在另一个程序中打开，请关闭该文件夹或或文件，然后重试。这类无法关闭删除文件夹的情况，如下图所示。 解决这个的关键是，找到是哪个程序在使用该文件夹，把这个程序关闭掉就行了。 但有时说实在的并不好找。 下面来介绍一个方便的找到这些程序的方法。 首先按ctrl+shitf+esc快捷键，打开任务管理器。然后...
DevOps进阶十一xcopy提示“目标**是文件名还是目录名“?
xcopy 若目标盘上不存在此子目录,而在目标盘的结束符又不以""为结束,则将提示:does destination specify a file name or directory name on the target[f=file,d=directory]?在目标盘上创建文件[按下]还是创建子目录[按下d] ?应选择d键如何在命令中指定copy的是一个文件或者目录?而不用再手动输入F或...
DevOps进阶(一)：DevOps 软件开发工艺解读
DevOps软件开发工艺解读随着业务复杂化和人员的增加，开发人员和运维人员逐渐演化成两个独立的部门，他们工作地点分离，工具链不同，业务目标也有差异，这使得他们之间出现一条鸿沟。而发布软件就是将一个软件想从鸿沟的这边送去那边，这之中困难重重。另一方面，行业竞争更加激烈，无论是客户还是公司自身，都要求软件能快速发布，频繁修改，而上边所说的这种隔阂，阻碍了开发团队的生产力，成了企业亟待解决的难题。面对...
DevOps进阶(七)：使用 jenkins 和 nodejs 进行自动打包更新服务
创建任务创建任务比较简单，这里我们创建自由风格项目：General信息这里填写项目或任务的基本信息，如下：GitBucket这里我们用到的就以下两点，一个是参数化构建：构建的时候可以指定部分参数，比如这里我们这里指定要构建的分支作参数，第二个是丢弃旧的构建：这样每次构建都会丢弃之前历史构建，防止jenkins构建项目过多导致内存泄漏等问题：源码管理源码管理主要是填写我们要构建的...
DevOps进阶(四)：Jenkins构建触发器定时构建项目
一、在任务设置-构建触发器模块，选中“Build periodically”二、然后在日程表里输入你的定时构建时间，输入的时间语法参考如下：1、时间字段遵循cron的语法，每行由TAB或空格分隔的5个字段组成：MINUTE HOUR DOM MONOW DOW - 分钟：小时内的分钟数（0-59） - 小时 ：一天中的小时（0-23） - DOM：月份的日子（1-31） ...
DevOps进阶九使用assembly plugin实现自定义打包DevOps进阶九使用assembly plugin实现自定义打包
DevOps进阶（九）使用assembly plugin实现自定义打包assembly plugin的使用方式比较简单，主要有：1. 修改pom.xml pom.xml中设置如下：<build> <plugins> <plugin> <artifactId&g
DevOps进阶(六)：Jenkins 插件下载及安装
<h2 id="1-操作环境"><strong>1. 操作环境</strong></h2>1. Windows：win72. JenkinsJenkins 1.6193. JavaJDK_1.7.0_64bit.exe4. Tomcatapache-tomcat-8.
DevOps进阶十六linux下的find文件查找命令与grep文件内容查找命令
在使用linux时，经常需要进行文件查找。其中查找的命令主要有find和grep。两个命令是有区的。区别：(1)find命令是根据文件的属性进行查找，如文件名，文件大小，所有者，所属组，是否为空，访问时间，修改时间等。(2)grep是根据文件的内容进行查找，会对文件的每一行按照给定的模式(patter)进行匹配查找。一.find命令基本格式：find path expres......
DevOps进阶(三)：走近 DevOps 工程师
走近DevOps工程师我们之前已经听到很多谈论DevOps和DevOps世界的最新趋势的事情，但是就DevOps工程师本身，到底干些什么呢？在最纯粹的存在形式上来说，DevOps工程师是为了加快开发和运营团队之间的交付效率而存在的桥梁。DevOps工程师在软件生命周期中能带来什么？在传统的交付周期中，软件开发人员会在经年累月的编写代码后，将软件交给QA团队进行测试，然后将最终版本交给运营...
DevOps进阶十四Jenkins关闭和重启实现方式
1、关闭Jenkins 只需要在访问jenkins服务器的网址url地址后加上exit。例如我jenkins的地址http://localhost:8080/，那么我只需要在浏览器地址栏上敲下http://localhost:8080/exit 网址就能关闭jenkins服务.2、重启Jenkieshttp://localhost:8080/restart3、重新加载配置信息http...
DevOps进阶(五)：Jenkins 构建远程触发器
   我们在执行Jenkins的项目构建的时候一般都是通过web管理界面中的”构建”来执行项目构建操作，但是除此之外我们还可以通过项目配置中的”构建触发器”来触发构建操作，其中”构建触发器”有一种方式是通过配置令牌远程触发项目构建；要启用Token(令牌)远程触发项目构建首先要保证Jenkins服务安装了build-token-root 插件，...
DevOps进阶(八)：maven 三种打包插件
maven三种打包插件maven有多种可以打包的插件，如下： plugin function 官网 maven-jar-plugin maven 默认打包插件，用来创建 project jar maven-shade-plugin 用来打可执行包，executable(fat) jar http://maven.apache.org/plug...
DevOps进阶十五Linux下查看和添加环境变量
Linux下查看和添加环境变量$PATH：决定了shell将到哪些目录中寻找命令或程序，PATH的值是一系列目录，当您运行一个程序时，Linux在这些目录下进行搜寻编译链接。编辑你的 PATH 声明，其格式为：PATH=$PATH:<PATH 1>:<PATH 2>:<PATH 3>:------:你可以自己加上指定的路径，中间用冒号隔开。环境变量更改后......
【干货】规模化敏捷DevOps四大实践之持续探索CE中英对照版
贾磊：高级质量经理&敏捷教练曾就职于外企、国企、大型上市企业等，担任过测试工程师、测试经理、项目经理、敏捷教练、质量总监、高级质量经理等岗位。是一名敏捷变革的爱好者和践行者。爱好网球、羽毛球。正文原文链接：https://www.scaledagileframework.com/continuous-explorati
什么是DevSecOps?开发人员如何为安全而左移
在IT流行语的字母组合中，DevSecOps是一个很容易让人混淆的缩写。DevSecOps是一个特定工具吗?是否有DevSecOps流程或最佳实践?DevSecOps应该成为内部IT部门的优先事项，还是更广泛的公司理念?如果一个公司已经利用了DevOps的流程和技术栈，那么它应该升级到DevSecOps吗?或者这只
企业项目开发流程
企业项目开发流程商城1.1B2C直销商城商家与会员直接交易(BusinessToCustomer)1.2B2B批发商城商家与商家直接交易1.3B2B2C购物平台商家和会员在另一个商家提供的平台上面进行交易1.4C2B定制商城会员向商家发起定制商品的需求，商家去完成。1.5O2O线上线下
【Devops】【docker】【CI/CD】jenkins 清除工作空间报错
jenkins清除工作空间报错 错误如下： Error:WipeOutWorkspaceblockedbySCM   解决方法：进入jenkins服务器，进入workspace，手动rmcd/var/jenkins_home/workspace  ===================注释==================如果你的启动命令如下：【进行了外部目录的挂载
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot