Skip to content

NimTechnology

Trình bày các công nghệ CLOUD một cách dễ hiểu.

  • Kubernetes & Container
    • Docker
    • Kubernetes
      • Ingress
      • Pod
    • Helm Chart
    • OAuth2 Proxy
    • Isito-EnvoyFilter
    • Apache Kafka
      • Kafka
      • Kafka Connect
      • Lenses
    • Vault
    • Longhorn – Storage
    • VictoriaMetrics
    • MetalLB
    • Kong Gateway
  • CI/CD
    • ArgoCD
    • ArgoWorkflows
    • Argo Events
    • Spinnaker
    • Jenkins
    • Harbor
    • TeamCity
    • Git
      • Bitbucket
  • Coding
    • DevSecOps
    • Terraform
      • GCP – Google Cloud
      • AWS – Amazon Web Service
      • Azure Cloud
    • Golang
    • Laravel
    • Python
    • Jquery & JavaScript
    • Selenium
  • Log, Monitor & Tracing
    • DataDog
    • Prometheus
    • Grafana
    • ELK
      • Kibana
      • Logstash
  • BareMetal
    • NextCloud
  • Toggle search form

[Kaniko/Jenkins] Install Jenkins through helm and build/deploy app in K8s by Kaniko

Posted on September 4, 2021May 17, 2022 By nim No Comments on [Kaniko/Jenkins] Install Jenkins through helm and build/deploy app in K8s by Kaniko

Nói nhiều 1 chút: các bạn cũng biết trước dây chúng ta cài hệ thống k8s điều đầu tiên chúng ta sẽ cài docker.
Nhưng ở thời điển hiện tại thì Kubernetes is deprecating Docker as a container runtime after v1.20 nên việc chúng ta tận dụng các server k8s để build docker cũng đã ít đi dần.
Cài k8s thì ko cần cài docker nữa vì cài K0s dễ vl

Contents

Toggle
  • 1) Jenkins
    • 1.1) install k8s
  • 2) Jenkins Controller(master) create few pods and slowly on Kubernetes!
  • 3) Increase heap size of the jenkins on kubernetes.

1) Jenkins

1.1) install k8s

[KOS] Use KOS to install kubernetes so easily!

Và để tận dụng resource K8s để build container thì chúng ta đã có kaniko
giờ action thôi

Cài jenkins
https://www.jenkins.io/doc/book/installing/kubernetes/

helm repo add jenkinsci https://charts.jenkins.io

helm search repo jenkinsci
>>>>output
NAME             	CHART VERSION	APP VERSION	DESCRIPTION                                       
jenkinsci/jenkins	3.8.4        	2.303.2    	Jenkins - Build great things at any scale! The ...

helm show values jenkinsci/jenkins > jenkins.yaml

>>> các bạn tao 1 ns nhé
kubectl create ns jenkins

Các bạn thấy các bài hướng dẫn của mình khi cài bằng helm thì mình ít gõ câu lệnh lý do vì mình deploy đa số các app bằng argocd

Bạn có thể tìm hiểu ở link dưới nhé.

https://notes.nimtechnology.com/2021/06/21/argocdhuong-dan-cau-hinh-argocd-deploy-k8s-bang-helm/

Bạn có thể sử dụng câu lệnh này để lấy value helm jenkins

Giờ chúng ta đi tìm các plugin để đưa file value

Nếu bạn không muốn cấu hình thì tìm persistence và set như dưới.

persistence:
  enabled: false

Giờ file value hoàn chỉnh

controller:
  adminUser: "admin"
  adminPassword: "mật khẩu hihi"
  serviceType: NodePort
  nodePort: 32323
  installPlugins:
    - kubernetes:1.30.1
    - workflow-aggregator:2.6
    - git:4.11.0
    - configuration-as-code:1429.v09b_044a_c93de
    - blueocean:1.24.8
    - ansicolor:1.0.0
  tolerations:
    - key: "node"
      operator: "Equal"
      value: "storage-ssd"
      effect: "NoSchedule"
  nodeSelector:
    node: "storage-ssd"
persistence:
  enabled: true
  storageClass: longhorn-normal

Sau khi install thì truy cập jenkins thôi

sau khi login thành công thì tạo credential

Tuỳ bạn lựa chọn cái nào cho phù hợp nhé
Nhưng bạn nhìn kĩ file Jenkinsfile thì credential dạng file

Links Jenkins file ở ảnh trên.
https://github.com/mrnim94/playjenkins/blob/kaniko/Jenkinsfile

cái này dụng deploy k8s
Tạo account robot trên harbor
Tạo trước ntn
create secret trên k8s
kubectl create -n jenkins secret \
docker-registry regcred \
--docker-server=https://docker.nimtechnology.com \
--docker-username='robot$kaniko+kaniko' \
--docker-password='mật khẩu ahihi' \
--docker-email=mr.nim94@gmail.com
Thông tin tham khảo

git của mình:

https://github.com/mrnim94/playjenkins

build thử
dựa file builder.yaml nó tạo ra pod này

trong pod có container nào

image được đẩy lên harbor

ý da deploy lên k8s rồi mà lỗi không pull được images, tạo secret cho ns pipeline-demo

kubectl create -n pipeline-demo secret \
docker-registry.  \
--docker-server=https://docker.nimtechnology.com \
--docker-username='robot$kaniko+kaniko' \
--docker-password='mật khẩu ahihi' \
--docker-email=mr.nim94@gmail.com

sửa file yaml

apiVersion: v1
kind: Pod
metadata:
  name: private-reg
spec:
  containers:
  - name: private-reg-container
    image: <your-private-image>
  imagePullSecrets:
  - name: regcred

Video của Anh Ấn độ, Anh em ủng hộ ảnh nhé

2) Jenkins Controller(master) create few pods and slowly on Kubernetes!

mình gặp case như sau. khi mình đã create jenkins controller trên k8s. Mình thấy các job chạy rất ít, job waiting in queue nhiều hoặc các pod trên jenkins agent trên k8s chuyển từ offline -> running(online rất là chậm)

Bạn cần tăng concurrency limit nhiều, jenkins master tạo càng nhiều pod agent đồng thời và đương nhiên là sẽ chiếm nhiều resouce!!!

3) Increase heap size of the jenkins on kubernetes.

     containers:
        - name: jenkins
          image: "jenkins/jenkins:2.319.1-jdk11"
          imagePullPolicy: "Always"
          securityContext:
            allowPrivilegeEscalation: false
            readOnlyRootFilesystem: true
            runAsGroup: 1000
            runAsUser: 1000
          args: [ "--httpPort=8080"]
          env:
            - name: POD_NAME
              valueFrom:
                fieldRef:
                  fieldPath: metadata.name
            - name: JAVA_OPTS
              value: >-
                 -Dcasc.reload.token=$(POD_NAME) -Xms8000m -Xmx8000m  
            - name: JENKINS_OPTS
              value: >-
                 --webroot=/var/jenkins_cache/war 
            - name: JENKINS_SLAVE_AGENT_PORT
              value: "50000"
            - name: CASC_JENKINS_CONFIG
              value: /var/jenkins_home/casc_configs

Bạn cần tăng như ảnh nhé!

CI/CD, Jenkins, Kubernetes & Container

Post navigation

Previous Post: [Istio-Multi Cluster] Tutorial is very detailed to install Primary-Remote on different networks
Next Post: [Istio/Recheck Envoy] Test các features liên quan đến EnvoyFilter trên Istio .

More Related Articles

[code/k8s] Lost or not found file inside the container on k8s Kubernetes
[Jenkins] Share Libraries 3: Import library class. Jenkins
[Jenkins] Scripted Pipeline lesson 6: Stage _ Input Jenkins
[Kubernetes] How to delete POD is Terminating and very stubborn Kubernetes
[Jenkins] Install Jenkins StandAlone in Kubernetes Jenkins
[Argo Rollouts] How We Brought Automated Rollback to 2100+ Micro-serv… CI/CD

Leave a Reply Cancel reply

Your email address will not be published. Required fields are marked *

Tham Gia Group DevOps nhé!
Để Nim có nhiều động lực ra nhiều bài viết.
Để nhận được những thông báo mới nhất.

Recent Posts

  • [Azure] The subscription is not registered to use namespace ‘Microsoft.ContainerService’ May 8, 2025
  • [Azure] Insufficient regional vcpu quota left May 8, 2025
  • [WordPress] How to add a Dynamic watermark on WordPress. May 6, 2025
  • [vnet/Azure] VNet provisioning via Terraform. April 28, 2025
  • [tracetcp] How to perform a tracert command using a specific port. April 3, 2025

Archives

  • May 2025
  • April 2025
  • March 2025
  • February 2025
  • January 2025
  • December 2024
  • November 2024
  • October 2024
  • September 2024
  • August 2024
  • July 2024
  • June 2024
  • May 2024
  • April 2024
  • March 2024
  • February 2024
  • January 2024
  • December 2023
  • November 2023
  • October 2023
  • September 2023
  • August 2023
  • July 2023
  • June 2023
  • May 2023
  • April 2023
  • March 2023
  • February 2023
  • January 2023
  • December 2022
  • November 2022
  • October 2022
  • September 2022
  • August 2022
  • July 2022
  • June 2022
  • May 2022
  • April 2022
  • March 2022
  • February 2022
  • January 2022
  • December 2021
  • November 2021
  • October 2021
  • September 2021
  • August 2021
  • July 2021
  • June 2021

Categories

  • BareMetal
    • NextCloud
  • CI/CD
    • Argo Events
    • ArgoCD
    • ArgoWorkflows
    • Git
      • Bitbucket
    • Harbor
    • Jenkins
    • Spinnaker
    • TeamCity
  • Coding
    • DevSecOps
    • Golang
    • Jquery & JavaScript
    • Laravel
    • NextJS 14 & ReactJS & Type Script
    • Python
    • Selenium
    • Terraform
      • AWS – Amazon Web Service
      • Azure Cloud
      • GCP – Google Cloud
  • Kubernetes & Container
    • Apache Kafka
      • Kafka
      • Kafka Connect
      • Lenses
    • Docker
    • Helm Chart
    • Isito-EnvoyFilter
    • Kong Gateway
    • Kubernetes
      • Ingress
      • Pod
    • Longhorn – Storage
    • MetalLB
    • OAuth2 Proxy
    • Vault
    • VictoriaMetrics
  • Log, Monitor & Tracing
    • DataDog
    • ELK
      • Kibana
      • Logstash
    • Fluent
    • Grafana
    • Prometheus
  • Uncategorized
  • Admin

Copyright © 2025 NimTechnology.