jenkins pipeline api获取stage的详细信息_Jenkins + Docker 助力 Serverless 应用构建与部署...
本文來源: ServerlessLife 公眾號
近日,使用 Serverless 開發了一個應用。其中 CI/CD,是需要考慮的一個問題。這里用到了 Jenkins 和 Docker。并且 Jenkins Pipeline 運行在容器中。
本文將介紹如何使用 Jenkins 和 Docker 構建并部署 Serverless 應用。
環境安裝
需要安裝的軟件
- Docker
- Jenkins
筆者用的 MacBook,已經事先安裝好了 Docker,并且由于從 DockerHub 下載鏡像比較慢,為了加快鏡像下載速度,設置了使用國內的 Docker 鏡像源。
Jenkins 有多種運行方式:
- jenkins.war + Tomcat
- java -jar jenkins.war
- 各種 linux 操作系統分發包(例如:rpm 包)
- Docker
- Kubernetes
- 云廠商提供的解決方案
- ……
筆者這里使用 Docker 運行 Jenkins,因為構建步驟也會運行在 Docker 中,需要將 docker.sock 和 docker 命令掛載到容器中,啟動 jenkins 命令如下:
docker run -d -p 8080:8080 --name jenkins -e TZ="Asia/Shanghai" -v jenkins_home:/var/jenkins_home -v /var/run/docker.sock:/var/run/docker.sock -v (which docker):(whichdocker):(which docker) jenkins/jenkins:lts
注意:由于容器內 Jenkins 服務是由 jenkins 用戶啟動的,它無法訪問 /var/run/docker.sock,因此我們需要更改這個文件的權限。
在 Jenkins 啟動后安裝需要用到的插件:
- Localization: Chinese (Simplified)
- Git
- Pipeline
- Docker Pipeline
- Mask Passwords
建議啟動后只先安裝 Localization: Chinese (Simplified) 插件(該插件由 Jenkins 中文社區維護)。
等安裝好 Localization: Chinese (Simplified) 插件,并設置好管理員賬號后,再安裝其他所需的插件。
為什么要這樣做呢?
由于 Jenkins 插件服務器在國外,通常情況下因為網絡問題,下載插件會比較慢,也經常會遇到插件下載失敗的問題。
為了解決這個痛點,Localization: Chinese (Simplified) 插件提供了使用國內 Jenkins 插件源的功能。
因此,在安裝好 Localization: Chinese (Simplified) 插件后,請立即設置使用國內的 Jenkins 插件源,這樣之后其他插件的下載將變得快如閃電。
定制構建環境的 docker 鏡像
本文使用 Serverless Framework 部署應用到騰訊云。
serverless 命令行是使用 nodejs 開發的,所以會需要 nodejs 環境。
此外,計劃部署的應用是用 python 開發的,也會需要到 python 環境。
應用構建部署是在 docker 容器中運行的,所以需要一個同時安裝有 nodejs 和 python 的 docker 鏡像。
在 GitHub 上找到了 docker-python-nodejs 倉庫: https://github.com/nikolaik/docker-python-nodejs。
基于 nikolaik/python-nodejs 鏡像構建了新鏡像 python-nodejs-serverless,Dockerfile 如下:
FROM nikolaik/python-nodejs:python3.6-nodejs12
RUN npm config set registry http://registry.npm.taobao.org&&npm install -g serverless
使用 docker build 命令構建鏡像:
docker build -t python-nodejs-serverless .
創建 Jenkins Job 構建部署應用
創建一個 Pipeline 類型的 job,名稱為:serverless-python-demo-pipeline,并開啟參數化構建,增加兩個密碼參數:TENCENT_SECRET_ID 和 TENCENT_SECRET_KEY,用于自動登陸騰訊云。
經過不斷實踐、不斷完善,Jenkinsfile 最終內容如下:
pipeline {agent {docker {image 'python-nodejs-serverless'args '-e TZ="Asia/Shanghai"'}}stages {stage('Checkout') {steps {git branch: 'main', url: 'https://github.com/donhui/serverless-python-demo.git'}}stage('EnvSetUp') {steps{wrap([$class: 'MaskPasswordsBuildWrapper']) {sh 'touch .env'sh 'echo TENCENT_SECRET_ID=${TENCENT_SECRET_ID} >> .env'sh 'echo TENCENT_SECRET_KEY=${TENCENT_SECRET_KEY} >> .env'}}}stage('Build') {steps {sh 'pip install -i https://pypi.douban.com/simple/ -r requirments.txt -t ./'}}stage('Deploy') {steps {sh 'serverless deploy'}}}post{always {deleteDir()}} }
對于 Jenkinsfile 做如下說明:
- pipeline 由 agent 、stages 和 post 組成,其中 stages 下包括一系列 stage,而 stage 下又有 steps,steps 下則是一些指令
- agent 為 docker 表示構建過程運行在 docker 容器中
- docker args 中 -u 0:0 表示以 root 用戶運行 docker 容器,否則會出現一些權限問題
- docker args 中 TZ="Asia/Shanghai” 表示設置時區中國區,這樣 serverless 命令行將會將應用部署到騰訊云,否則默認部署到 AWS
- stages 下包括多個 stage:Checkout、EnvSetUp、Build、Deploy
- Checkout 階段用于檢出代碼,如果是私有倉庫,還需要用到 Credentials 插件
- EnvSetUp 階段用于生成 .env 文件,用于自動登錄騰訊云,為了避免密碼明文顯示在控制臺,這里用了 Mask Passwords 插件
- Build 階段主要是用于構建,這里使用 pip 命令安裝第三方庫,其中用到了豆瓣的 python 源
- Deploy 階段則是使用 serverless deploy 命令部署應用
- post 用于 pipeline 或 stage 完成后執行后置操作,這里用來在 pipeline 完成后對工作區進行清理
點擊 Build With Parameters—>開始構建,運行 Job:
運行狀態截圖如下,從下圖中可以看到每次構建各個 stage 的耗時:
查看 EnvSetUp stage 的日志,可以看到敏感信息已經被隱藏,保證了信息安全,這要歸功于 Mask Passwords 插件:
關于 Mask Passwords 插件的設置,在系統管理—>系統配置中,可以對 Mask Passwords 插件做一些全局設置,如下圖所示:
查看 Deploy 日志,可以看到部署成功的信息提示:
打開應用控制臺,serverless-python-demo 應用詳細信息如下:
總結
本文介紹了如何使用安裝 Jenkins 及插件,如何定制構建環境的 Docker 鏡像,并展開分析了 Jenkins Pipeline 的核心配置文件:Jenkinsfile。此外,還用到了 Mask Passwords 插件來隱藏敏感信息,保證了信息安全。
本次實踐使用 Jenkins + Docker 成功部署了 Serverless 應用,希望對看到這篇文章的讀者帶來一定的借鑒參考意義。
參考
https://hackernoon.com/jenkins-docker-and-cicd-for-serverless-bw5p323d
https://github.com/nikolaik/docker-python-nodejs
https://hub.docker.com/r/jenkins/jenkins
https://github.com/jenkinsci/localization-zh-cn-plugin
https://stackoverflow.com/questions/46659862/how-to-mask-a-password-field-in-jenkins-pipeline-project
https://www.jenkins.io/doc/book/pipeline/syntax/
總結
以上是生活随笔為你收集整理的jenkins pipeline api获取stage的详细信息_Jenkins + Docker 助力 Serverless 应用构建与部署...的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 金戒指多少钱一个啊?
- 下一篇: 声速的测量的实验原理和应用_声速的测定实