微服務模式下如何實現多模塊并行構建發布
在微服務項目中具有很多個服務模塊,為了便于管理需要將項目規范化,使用GitLabGroup管理整個項目,每個project對應一個微服務,每個微服務對應一個Jenkins job。開始發布的時候需要我們在手動選擇各個服務然后發布。模塊很多的時候就不太方便了。創建一個Jenkins項目用來統一管理,綁定GitLab group信息,然后調用Gitlab接口獲取project信息。用戶選擇要發布的微服務,然后根據服務名稱并行觸發每個要發布服務的流水線進行構建和發布。
我們先來看看如何使用pipeline中的parallel語法,這里列舉了兩個例子:并行任務、并行階段。
并行任務
首先我們需要定義每個任務的名稱和對應的操作,可以通過一個Map類型參數實現。在這里定義了一個空的map,然后為這個map增加了兩個任務分別為build01和build02,它們的操作是執行shell命令。最后通過parallel運行。
- def tasks = [:]
- //定義要并行的任務名稱和任務
- tasks["build01"] = {sh "ls"}
- tasks["build02"] = {sh "ls"}
- //并行
- parallel tasks
并行階段
并行stage也是一種經常用到的運行方式,我們可以使用這種方式解決不必要的時間浪費,尤其在各個平臺運行自動化測試的時候,我們不必等到windows平臺驗證完成再進行Linux系統中的驗證。而是直接在各個平臺中同時運行,加快了測試的速度。我們還可以使用failFast參數配置當其中一個任務失敗其他任務是否一樣失敗,參數值為布爾類型(true false)。
這個例子是jenkins官方提供的,大概的內容是并行在不同系統環境下進行自動化測試。
- pipeline {
- agent none
- stages {
- stage('Run Tests') {
- parallel {
- stage('Test On Windows') {
- agent {
- label "windows"
- }
- steps {
- bat "run-tests.bat"
- }
- post {
- always {
- junit "**/TEST-*.xml"
- }
- }
- }
- stage('Test On Linux') {
- agent {
- label "linux"
- }
- steps {
- sh "run-tests.sh"
- }
- post {
- always {
- junit "**/TEST-*.xml"
- }
- }
- }
- }
- }
- }
- }
主控Job實現
首先我們用靜態數據來存儲要發布的項目名稱存儲為一個List,定義一個Map用來存儲并行任務。定義buildStatus展示項目錯誤信息(這里做了信息格式化)。使用build進行項目觸發。這里會把每個失敗的任務存儲展示到流水線日志中。
- def jobs = ["test2","demo-test-service"]
- def parallelMap = [:]
- def buildStatus = [:]
- jobs.each{
- println(it)
- parallelMap[it] = {
- try {
- build job: "${it}",
- parameters: [string(name: 'branchName', value: 'Dev')]
- } catch(e){
- println("${it} " + e)
- buildStatus[it] = e
- }
- }
- }
- parallel parallelMap
- //判斷狀態
- for ( i in buildStatus.keySet()){
- currentBuild.description = "構建信息"
- currentBuild.description += ("\n項目名稱->" + i + "錯誤信息:->"+ buildStatus[i])
- }
運行效果

基本上每個模塊對應一個pipeline項目。有時候我們需要設置一個集中控制項目來根據設置的參數有序觸發各個模塊服務對應的流水線進行發布。在各個模塊之間沒有發布順序的時候,我們可以使用Pipeline的Parallel語法進行項目的并行構建。加快發布速度,減少重復手工操作成本。