Compare commits
11 Commits
argo-workf
...
1b7204c2ba
Author | SHA1 | Date | |
---|---|---|---|
1b7204c2ba | |||
8f9aed299d | |||
6522977280 | |||
c707974a2e | |||
cc2f224d60 | |||
b14e6cf873 | |||
87e3c0df80 | |||
aea09a6081 | |||
d05cede409 | |||
17162027b6 | |||
8887f1b2bd |
54
Jenkinsfile
vendored
54
Jenkinsfile
vendored
@ -1,19 +1,22 @@
|
|||||||
pipeline {
|
pipeline {
|
||||||
agent any
|
agent {
|
||||||
|
kubernetes {
|
||||||
|
label 'kubernetes-agent'
|
||||||
|
yamlFile 'podTemplate.yaml'
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
environment {
|
environment {
|
||||||
|
ACR_NAME = 'marcin00'
|
||||||
|
CLIENT_ID = 'c302726f-fafb-4143-94c1-67a70975574a'
|
||||||
DOCKER_REGISTRY_URL = 'marcin00.azurecr.io'
|
DOCKER_REGISTRY_URL = 'marcin00.azurecr.io'
|
||||||
DOCKER_IMAGE = "${DOCKER_REGISTRY_URL}/user-microservice:${GIT_COMMIT}"
|
DOCKER_IMAGE = "${DOCKER_REGISTRY_URL}/user-microservice:${GIT_COMMIT}"
|
||||||
ACR_NAME = 'marcin00'
|
|
||||||
}
|
}
|
||||||
|
|
||||||
stages {
|
stages {
|
||||||
stage('Checkout') {
|
stage('Code Tests') {
|
||||||
steps {
|
steps {
|
||||||
checkout scm
|
container('python') {
|
||||||
}
|
|
||||||
}
|
|
||||||
stage('Test python app') {
|
|
||||||
steps {
|
|
||||||
script {
|
|
||||||
dir('api') {
|
dir('api') {
|
||||||
sh '''
|
sh '''
|
||||||
python3 -m venv env
|
python3 -m venv env
|
||||||
@ -30,33 +33,13 @@ pipeline {
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
stage('Build & test docker image') {
|
|
||||||
steps {
|
|
||||||
script {
|
|
||||||
appImage = docker.build("${DOCKER_IMAGE}")
|
|
||||||
|
|
||||||
sh label: 'Install dgoss', script: '''
|
stage('Build & Push Docker') {
|
||||||
curl -s -L https://github.com/aelsabbahy/goss/releases/latest/download/goss-linux-amd64 -o goss
|
|
||||||
curl -s -L https://github.com/aelsabbahy/goss/releases/latest/download/dgoss -o dgoss
|
|
||||||
chmod +rx *goss
|
|
||||||
'''
|
|
||||||
|
|
||||||
withEnv(['GOSS_OPTS=-f junit', 'GOSS_PATH=./goss', 'GOSS_SLEEP=3', 'SQLALCHEMY_DATABASE_URI=sqlite:///:memory:']) {
|
|
||||||
sh label: 'run image tests', script: './dgoss run -e SQLALCHEMY_DATABASE_URI=sqlite:///:memory: ${DOCKER_IMAGE} > goss_junit.xml'
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
post {
|
|
||||||
always {
|
|
||||||
junit testResults: '**/*goss_junit.xml'
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
stage('Deploy') {
|
|
||||||
steps {
|
steps {
|
||||||
script {
|
container('docker') {
|
||||||
sh '''
|
sh '''
|
||||||
az login --identity
|
docker build -t ${DOCKER_IMAGE} .
|
||||||
|
az login --identity --client-id ${CLIENT_ID}
|
||||||
az acr login --name ${ACR_NAME}
|
az acr login --name ${ACR_NAME}
|
||||||
docker push ${DOCKER_IMAGE}
|
docker push ${DOCKER_IMAGE}
|
||||||
'''
|
'''
|
||||||
@ -64,9 +47,4 @@ pipeline {
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
post {
|
|
||||||
cleanup {
|
|
||||||
script { cleanWs() }
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
}
|
||||||
|
@ -1,5 +0,0 @@
|
|||||||
apiVersion: v1
|
|
||||||
kind: ServiceAccount
|
|
||||||
metadata:
|
|
||||||
name: edu-agentpool
|
|
||||||
namespace: argo
|
|
@ -1,12 +0,0 @@
|
|||||||
apiVersion: rbac.authorization.k8s.io/v1
|
|
||||||
kind: Role
|
|
||||||
metadata:
|
|
||||||
namespace: argo
|
|
||||||
name: argo-workflow-manager
|
|
||||||
rules:
|
|
||||||
- apiGroups: ["argoproj.io"]
|
|
||||||
resources: ["workflowtaskresults"]
|
|
||||||
verbs: ["create", "get", "list", "update", "patch", "delete"]
|
|
||||||
- apiGroups: ["argoproj.io"]
|
|
||||||
resources: ["workflows"]
|
|
||||||
verbs: ["create", "get", "list", "update", "patch", "delete"]
|
|
@ -1,142 +0,0 @@
|
|||||||
apiVersion: argoproj.io/v1alpha1
|
|
||||||
kind: Workflow
|
|
||||||
metadata:
|
|
||||||
generateName: build-workflow-
|
|
||||||
spec:
|
|
||||||
entrypoint: main
|
|
||||||
arguments:
|
|
||||||
parameters:
|
|
||||||
- name: repo
|
|
||||||
value: https://gitea.marcin00.pl/pikram/user-microservice.git
|
|
||||||
- name: branch
|
|
||||||
value: main
|
|
||||||
- name: image
|
|
||||||
value: marcin00.azurecr.io/user-microservice
|
|
||||||
- name: registry_server
|
|
||||||
value: marcin00.azurecr.io
|
|
||||||
serviceAccountName: edu-agentpool
|
|
||||||
volumeClaimTemplates:
|
|
||||||
- metadata:
|
|
||||||
name: workspace
|
|
||||||
spec:
|
|
||||||
accessModes: [ "ReadWriteOnce" ]
|
|
||||||
resources:
|
|
||||||
requests:
|
|
||||||
storage: 128Mi
|
|
||||||
volumes:
|
|
||||||
- name: secrets-store
|
|
||||||
csi:
|
|
||||||
driver: secrets-store.csi.k8s.io
|
|
||||||
readOnly: true
|
|
||||||
volumeAttributes:
|
|
||||||
secretProviderClass: azure-keyvault
|
|
||||||
templates:
|
|
||||||
|
|
||||||
# 🔁 Main steps sequence
|
|
||||||
- name: main
|
|
||||||
steps:
|
|
||||||
- - name: checkout
|
|
||||||
template: checkout
|
|
||||||
arguments:
|
|
||||||
parameters:
|
|
||||||
- name: repo
|
|
||||||
value: "{{workflow.parameters.repo}}"
|
|
||||||
- name: branch
|
|
||||||
value: "{{workflow.parameters.branch}}"
|
|
||||||
- - name: tests
|
|
||||||
template: tests
|
|
||||||
- - name: build-test-and-push-image
|
|
||||||
template: build-test-and-push-image
|
|
||||||
arguments:
|
|
||||||
parameters:
|
|
||||||
- name: git-sha
|
|
||||||
value: "{{steps.checkout.outputs.parameters.git-sha}}"
|
|
||||||
|
|
||||||
# 📦 GIT CHECKOUT
|
|
||||||
- name: checkout
|
|
||||||
inputs:
|
|
||||||
parameters:
|
|
||||||
- name: repo
|
|
||||||
- name: branch
|
|
||||||
container:
|
|
||||||
image: alpine/git
|
|
||||||
command: [sh,-c]
|
|
||||||
workingDir: /workspace
|
|
||||||
args:
|
|
||||||
- |
|
|
||||||
git clone --depth 1 --branch "{{inputs.parameters.branch}}" --single-branch "{{inputs.parameters.repo}}" repo
|
|
||||||
cd repo
|
|
||||||
git rev-parse HEAD > /tmp/gitsha.txt
|
|
||||||
volumeMounts:
|
|
||||||
- name: workspace
|
|
||||||
mountPath: /workspace
|
|
||||||
outputs:
|
|
||||||
parameters:
|
|
||||||
- name: git-sha
|
|
||||||
valueFrom:
|
|
||||||
path: /tmp/gitsha.txt
|
|
||||||
|
|
||||||
# 🧪 PYTHON TESTS
|
|
||||||
- name: tests
|
|
||||||
script:
|
|
||||||
image: python:3.11.7-alpine
|
|
||||||
command: [sh]
|
|
||||||
workingDir: /workspace/repo/api
|
|
||||||
source: |
|
|
||||||
python3 -m venv env
|
|
||||||
. env/bin/activate
|
|
||||||
pip install -r requirements.txt pytest
|
|
||||||
python3 -m pytest --junit-xml=pytest_junit.xml
|
|
||||||
volumeMounts:
|
|
||||||
- name: workspace
|
|
||||||
mountPath: /workspace
|
|
||||||
|
|
||||||
# 🐳 BUILDS AND GOSS TESTS
|
|
||||||
- name: build-test-and-push-image
|
|
||||||
inputs:
|
|
||||||
parameters:
|
|
||||||
- name: git-sha
|
|
||||||
container:
|
|
||||||
image: docker:dind
|
|
||||||
command: [sh, -c]
|
|
||||||
workingDir: /workspace/repo
|
|
||||||
args:
|
|
||||||
- |
|
|
||||||
dockerd-entrypoint.sh &
|
|
||||||
sleep 3
|
|
||||||
DOCKER_IMAGE={{workflow.parameters.image}}:{{inputs.parameters.git-sha}}
|
|
||||||
docker build -t $DOCKER_IMAGE .
|
|
||||||
|
|
||||||
apk add --no-cache bash
|
|
||||||
|
|
||||||
wget https://github.com/aelsabbahy/goss/releases/latest/download/goss-linux-amd64 -O goss
|
|
||||||
wget https://github.com/aelsabbahy/goss/releases/latest/download/dgoss -O dgoss
|
|
||||||
chmod +rx *goss
|
|
||||||
|
|
||||||
export GOSS_OPTS="-f junit"
|
|
||||||
export GOSS_PATH=./goss
|
|
||||||
export GOSS_SLEEP=3
|
|
||||||
./dgoss run -e SQLALCHEMY_DATABASE_URI=sqlite:///:memory: $DOCKER_IMAGE > /workspace/goss_junit.xml
|
|
||||||
|
|
||||||
echo "===> Logging into ACR"
|
|
||||||
ACR_PASSWORD=$(cat /mnt/secrets/acr-password)
|
|
||||||
echo "$ACR_PASSWORD" | docker login {{workflow.parameters.registry_server}} -u $ACR_USERNAME --password-stdin
|
|
||||||
|
|
||||||
echo "===> Pushing image to ACR"
|
|
||||||
docker push $DOCKER_IMAGE
|
|
||||||
env:
|
|
||||||
- name: ACR_USERNAME
|
|
||||||
value: marcin00
|
|
||||||
securityContext:
|
|
||||||
privileged: true
|
|
||||||
volumeMounts:
|
|
||||||
- name: workspace
|
|
||||||
mountPath: /workspace
|
|
||||||
- name: docker-library
|
|
||||||
mountPath: /var/lib/docker
|
|
||||||
- name: secrets-store
|
|
||||||
mountPath: "/mnt/secrets"
|
|
||||||
readOnly: true
|
|
||||||
volumes:
|
|
||||||
- name: docker-library
|
|
||||||
emptyDir: {}
|
|
@ -1,13 +0,0 @@
|
|||||||
apiVersion: rbac.authorization.k8s.io/v1
|
|
||||||
kind: RoleBinding
|
|
||||||
metadata:
|
|
||||||
name: argo-edu-agentpool-binding
|
|
||||||
namespace: argo
|
|
||||||
subjects:
|
|
||||||
- kind: ServiceAccount
|
|
||||||
name: edu-agentpool
|
|
||||||
namespace: argo
|
|
||||||
roleRef:
|
|
||||||
kind: Role
|
|
||||||
name: argo-workflow-manager
|
|
||||||
apiGroup: rbac.authorization.k8s.io
|
|
@ -1,25 +0,0 @@
|
|||||||
apiVersion: secrets-store.csi.x-k8s.io/v1
|
|
||||||
kind: SecretProviderClass
|
|
||||||
metadata:
|
|
||||||
name: azure-keyvault
|
|
||||||
namespace: argo
|
|
||||||
spec:
|
|
||||||
provider: azure
|
|
||||||
secretObjects:
|
|
||||||
- secretName: acr-creds
|
|
||||||
type: Opaque
|
|
||||||
data:
|
|
||||||
- objectName: acr-password
|
|
||||||
- key: password
|
|
||||||
parameters:
|
|
||||||
usePodIdentity: "false"
|
|
||||||
useVMManagedIdentity: "true"
|
|
||||||
userAssignedIdentityID: "0c2780e4-8594-4aab-8f1a-8a19f71924bd" # client_id of the user-assigned managed identity
|
|
||||||
clientID: "0c2780e4-8594-4aab-8f1a-8a19f71924bd" # client_id of the user-assigned managed identity
|
|
||||||
keyvaultName: "dev-aks"
|
|
||||||
objects: |
|
|
||||||
array:
|
|
||||||
- |
|
|
||||||
objectName: acr-password
|
|
||||||
objectType: secret
|
|
||||||
tenantID: "f4e3e6f7-d21c-460e-b201-2192174e7f41"
|
|
49
podTemplate.yaml
Normal file
49
podTemplate.yaml
Normal file
@ -0,0 +1,49 @@
|
|||||||
|
apiVersion: v1
|
||||||
|
kind: Pod
|
||||||
|
metadata:
|
||||||
|
labels:
|
||||||
|
jenkins: "slave"
|
||||||
|
jenkins/label: "kubernetes-agent"
|
||||||
|
spec:
|
||||||
|
containers:
|
||||||
|
- name: jnlp
|
||||||
|
image: jenkins/inbound-agent:alpine
|
||||||
|
tty: false
|
||||||
|
workingDir: /home/jenkins/agent
|
||||||
|
volumeMounts:
|
||||||
|
- name: workspace-volume
|
||||||
|
mountPath: /home/jenkins/agent
|
||||||
|
env:
|
||||||
|
- name: JENKINS_WEB_SOCKET
|
||||||
|
value: "true"
|
||||||
|
- name: REMOTING_OPTS
|
||||||
|
value: "-noReconnectAfter 1d"
|
||||||
|
|
||||||
|
- name: python
|
||||||
|
image: python:3.11.7-alpine
|
||||||
|
command:
|
||||||
|
- cat
|
||||||
|
tty: true
|
||||||
|
workingDir: /home/jenkins/agent
|
||||||
|
volumeMounts:
|
||||||
|
- name: workspace-volume
|
||||||
|
mountPath: /home/jenkins/agent
|
||||||
|
|
||||||
|
- name: docker
|
||||||
|
image: marcin00.azurecr.io/azure-cli-docker:slim-bookworm
|
||||||
|
tty: true
|
||||||
|
workingDir: /home/jenkins/agent
|
||||||
|
securityContext:
|
||||||
|
privileged: true
|
||||||
|
volumeMounts:
|
||||||
|
- name: workspace-volume
|
||||||
|
mountPath: /home/jenkins/agent
|
||||||
|
|
||||||
|
nodeSelector:
|
||||||
|
kubernetes.io/os: linux
|
||||||
|
|
||||||
|
restartPolicy: Never
|
||||||
|
|
||||||
|
volumes:
|
||||||
|
- name: workspace-volume
|
||||||
|
emptyDir: {}
|
Reference in New Issue
Block a user