Golang持续集成与自动化测试和部署

article/2025/8/2 9:24:41

概述

在这里插入图片描述

Golang是一门性能优异的静态类型语言,但因其奇快的编译速度,结合DevOps, 使得它也非常适合快速开发和迭代。

本文讲述如何使用Golang, 进行持续集成与自动化测试和部署。主要使用了以下相关技术:

  • dep: 进行包的依赖管理
  • gin: 搭建 api 服务
  • gorm:ORM, 数据CRUD
  • mysql: 存储数据
  • testfixtures: 测试夹具,在自动化测试时,自动向数据库填充用于测试的数据
  • httpexpect: HTTP 测试包,用于API测试
  • GoDotEnv: 环境变量处理
  • go test: 使用test命令进行单元测试, 基准测试和 HTTP 测试
  • GitLabCI: DevOps 工具
  • golint: Golang 静态检查工具
  • migrate: 数据库迁移工具
  • Docker: 使用 zacksleo/golang 镜像, 该镜像默认安装了 curl,git,build-base,dep 和 golint
  • db2struct: 将数据库表结构一键生成为 struct(gorm的model)
  • apig: 基于 gorm 和 gin 一键生成 CRUD API

开发流程

  • 使用 apig 脚手架工具初始化项目结构和目录
  • 使用 dep 安装相关依赖
  • 使用 migrate 编写数据库迁移方法,并执行迁移创建数据表
  • 使用 db2struct 生成 models
  • 使用 apig 生成 crud 代码
  • 使用 httpexpect 编写 api 测试代码,并通过 testfixtures 实现数据的自动填充
  • 编写 GitLabCI 脚本进行持续集成

在上述过程中,如需连接数据库时,可通过 GoDotEnv 来实现环境变量的使用

相关CI脚本

# golang-devops-and-auto-deploy
image: zacksleo/golang
stages:- test- build- deployvariables:GOPATH: /rootbefore_script:- mkdir -p ~/src/github.com/zacksleo/projectname- cp -r . ~/src/github.com/zacksleo/projectname- cd ~/src/github.com/zacksleo/projectname
lint:stage: testscript:- golint -set_exit_status
unit-tests:stage: testservices:- mysql:5.6variables:MYSQL_ROOT_PASSWORD: rootMYSQL_DATABASE: webMYSQL_USER: webMYSQL_PASSWORD: webscript:- dep ensure- cp tests/.env .env- migrate -database "mysql://web:web@tcp(mysql:3306)/web" -path "./db/migrations/" up- go test -tags=unit_tests $(go list ./... | grep -v /vendor/ ./tests/api) -v -coverprofile .testCoverage.txtcoverage: '/^coverage:\s(\d+(?:\.\d+)?%)/'
integration-tests:stage: testservices:- mysql:5.6variables:MYSQL_ROOT_PASSWORD: rootMYSQL_DATABASE: webMYSQL_USER: webMYSQL_PASSWORD: webscript:- dep ensure- cp tests/.env .env- migrate -database "mysql://web:web@tcp(mysql:3306)/web" -path "./db/migrations/" up- go test -tags=integration $(go list ./tests/... | grep -v /vendor/) -v
build-bin:stage: testscript:- dep ensure- env GOOS=linux GOARCH=386 go build -o $CI_PROJECT_DIR/debugartifacts:expire_in: 60 minsuntracked: truename: "app"paths:- debugwhen: on_success
build-image:image: dockerstage: builddependencies:- build-binscript:- docker login -u gitlab-ci-token -p $CI_JOB_TOKEN $CI_REGISTRY- docker build -t $CI_REGISTRY_IMAGE:$CI_COMMIT_TAG .- docker push $CI_REGISTRY_IMAGE:$CI_COMMIT_TAG- docker rmi $CI_REGISTRY_IMAGE:$CI_COMMIT_TAGonly:- tagstags:- go
deploy:image: zacksleo/nodestage: deploybefore_script:- eval $(ssh-agent -s)- echo "$SSH_PRIVATE_KEY" > ~/deploy.key- chmod 0600 ~/deploy.key- ssh-add ~/deploy.key- mkdir -p ~/.ssh- '[[ -f /.dockerenv ]] && echo -e "Host *\n\tStrictHostKeyChecking no\n\n" > ~/.ssh/config'script:- cd deploy/production- rsync -rtvhze ssh . root@$DEPLOY_SERVER:/data/gitlab/projectname --stats- ssh root@$DEPLOY_SERVER "docker login -u gitlab-ci-token -p $CI_JOB_TOKEN $CI_REGISTRY"- ssh root@$DEPLOY_SERVER "cd /data/gitlab/projectname && echo -e '\nTAG=$CI_COMMIT_TAG' >> .env && docker-compose pull app && docker-compose stop app && docker-compose rm -f app && docker-compose up -d app"only:- tags

集成测试

// +build integrationpackage apiimport ("log""os""testing""github.com/gin-gonic/gin""github.com/jinzhu/gorm""github.com/joho/godotenv""gitlab.com/moguyun/api/debug/db""gitlab.com/moguyun/api/debug/server"testfixtures "gopkg.in/testfixtures.v2"
)var (fixtures *testfixtures.Contexts        *gin.Engine
)// PrepareTestDatabase for test
func PrepareTestDatabase(db *gorm.DB) {var fixtures *testfixtures.Contextvar err errortestfixtures.SkipDatabaseNameCheck(true)fixtures, err = testfixtures.NewFolder(db.DB(), &testfixtures.MySQL{}, "../fixtures")if err != nil {log.Fatal(err)}if err = fixtures.Load(); err != nil {log.Fatal(err)}
}// TestMain setup database
func TestMain(m *testing.M) {// Open connection with the test database.godotenv.Load("../.env")database := db.Connect()s = server.Setup(database)PrepareTestDatabase(database)os.Exit(m.Run())
}func TestToken(t *testing.T) {t.Run("CreateToken", TestCreateToken)
}func TestCustomer(t *testing.T) {t.Run("GetCustomers", TestGetCustomers)t.Run("GetCustomer", TestGetCustomer)t.Run("CreateCustomer", TestCreateCustomer)t.Run("UpdateCustomer", TestUpdateCustomer)t.Run("DeleteCustomer", TestDeleteCustomer)
}

注意事项

在测试中,如果需要区分单元测试和集成测试,可以使用 build tags 实现,如在文件头部中添加 // +build integration, 运行测试使用 - go test -tags=integration $(go list ./tests/... | grep -v /vendor/) -v 可以只执行集成测试

参考文档

  • Go Test
  • How to write benchmarks in Go
  • Go 性能调优之 —— 基准测试
  • Go语言圣经(中文版)
  • 使用tags区隔单元测试和集成测试

http://www.hkcw.cn/article/MWHUobBahk.shtml

相关文章

Google car key:安全、便捷的汽车解锁新选择

有了兼容的汽车和 Android 手机,Google car key可让您将Android 手机用作车钥匙。您可以通过兼容的 Android 手机锁定、解锁、启动汽车并执行更多功能。但是,Google car key安全吗?它是如何工作的?如果我的手机电池没电了怎么办&a…

QT开发技术【QTableView分页实现】

一、引言 在开发桌面应用程序时,当需要展示大量数据到表格中,一次性加载所有数据可能会导致界面卡顿、响应缓慢,甚至内存溢出。QTableView 是 Qt 框架中用于展示表格数据的强大组件,结合 QAbstractTableModel 可以实现数据的分页…

新增Vulkan支持|UWA Gears V1.1.0

UWA Gears 是UWA最新发布的无SDK性能分析工具。针对移动平台,提供了实时监测和截帧分析功能,帮助您精准定位性能热点,提升应用的整体表现。 本次版本更新主要是Frame Capture模式新增对Vulkan项目的支持,进一步满足使用Vulkan开发…

mapbox高阶,PMTiles介绍,MBTiles、PMTiles对比,加载PMTiles文件

👨‍⚕️ 主页: gis分享者 👨‍⚕️ 感谢各位大佬 点赞👍 收藏⭐ 留言📝 加关注✅! 👨‍⚕️ 收录于专栏:mapbox 从入门到精通 文章目录 一、🍀前言1.1 ☘️mapboxgl.Map 地图对象1.2 ☘️mapboxgl.Map style属性1.3 ☘️Fill面图层样式1.4 ☘️PMTiles介绍1.5…

Sums of Sliding Window Maximum_abc407F分析与解答

倒着考虑,考虑每个a_i对哪些k值做出贡献,对一个a_i,定义L_i和R_i为: 以上笔误:R_i的定义应该是:连续最多R_i个元素比a_i 小 如果得到了 L_i和R_i,我们从k的长度从小到大依次看看,a_…

用通义灵码2.5打造智能倒计时日历:从零开始的Python开发体验

前言:为什么选择通义灵码2.5? 通义灵码2.5版本带来了令人兴奋的升级,特别是全新的智能体模式让编程体验焕然一新。作为一名长期关注AI编程助手的开发者,我决定通过开发一个实用的倒计时日历小工具,来全面体验通义灵码2.5的各项新特性。 一、项目构思与智能体协作 首先,…

历年西安电子科技大学计算机保研上机真题

2025西安电子科技大学计算机保研上机真题 2024西安电子科技大学计算机保研上机真题 2023西安电子科技大学计算机保研上机真题 在线测评链接:https://pgcode.cn/school 查找不同的连续数字串个数 题目描述 给定一个数字串,查找其中不同的连续数字串的个…

一文读懂 STP:交换机接口状态详解及工作原理

一文读懂 STP:交换机接口状态详解及工作原理 一. 引言:STP 是什么,为何如此重要?二. STP 的核心作用:避免网络环路2.1 什么是 STP?2.2 STP 的核心概念 三. STP 交换机接口状态详解四. STP 的工作原理&#…

清华大学发Nature!光学工程+神经网络创新结合

2025深度学习发论文&模型涨点之——光学工程神经网络 清华大学的一项开创性研究成果在《Nature》上发表,为光学神经网络的发展注入了强劲动力。该研究团队巧妙地提出了一种全前向模式(Fully Forward Mode,FFM)的训练方法&…

PHP学习笔记(十一)

类常量 可以把在类中始终保持不变的值定义为常量,类常量的默认可见性是public。 接口中也可以定义常量。 可以用一个变量来动态调用类,但该变量的值不能为关键字 需要注意的是类常量只为每个类分配一次,而不是为每个类的实例分配。 特殊的…

NodeMediaEdge快速上手

NodeMediaEdge快速上手 简介 NodeMediaEdge是一款部署在监控摄像机网络前端中,拉取Onvif或者rtsp/rtmp/http视频流并使用rtmp/kmp推送到公网流媒体服务器的工具。 通过云平台协议注册到NodeMediaServer后,可以同NodeMediaServer结合使用。使用图形化的…

强化学习的前世今生(五)— SAC算法

书接前四篇 强化学习的前世今生(一) 强化学习的前世今生(二) 强化学习的前世今生(三)— PPO算法 强化学习的前世今生(四)— DDPG算法 本文为大家介绍SAC算法 7 SAC 7.1 最大熵强化…

优质电子实验记录本如何确保数据不泄密?

实验数据是企业和科研机构的核心资产,承载着创新成果与竞争优势,选择合适的实验记录载体至关重要。本文从传统纸质记录的安全性优劣势出发,对比分析普通电子实验记录本存在的安全问题,详细阐述优质电子实验记录本如何构建数据防护…

RFID 助力钢铁钢帘线生产效率质量双提升

RFID 助力钢铁钢帘线生产效率质量双提升 应用背景 钢铁钢帘线广泛应用于建筑、公路、桥梁、隧道、海洋工程等领域。,其质量和生产效率直接影响性能与安全性。在钢铁钢帘线的生产过程中,面临着诸多挑战。传统生产模式下,各生产环节信息传递不…

4.5V~100V, 3.8A 峰值电流限, 非同步, 降压转换器,LA1823完美替换MP9487方案

一:综述 LA1823 是一款易用的非同步,降压转换器。 该模块集成了 500mΩ 低导通阻抗的高侧 MOSFET。LA1823 使用 COT 控制技术。此种控制方式有利于快速动态响应,同时简化了反馈环路的设计。LA1823 可以提供最大 2A 的持续负载电流。LA1823有150kHz/240kH…

多杆合一驱动城市空间治理智慧化

引言:城市“杆林困境”与智慧化破局 走在现代城市的街道上,路灯、监控、交通信号灯、5G基站等杆体林立,不仅侵占公共空间,更暴露了城市治理的碎片化问题。如何让这些“沉默的钢铁”升级为城市的“智慧神经元”?答案在…

ElasticSearch迁移至openGauss

Elasticsearch 作为一种高效的全文搜索引擎,广泛应用于实时搜索、日志分析等场景。而 openGauss,作为一款企业级关系型数据库,强调事务处理与数据一致性。那么,当这两者的应用场景和技术架构发生交集时,如何实现它们之…

搭建 Select 三级联动架构-东方仙盟插件开发 JavaScript ——仙盟创梦IDE

三级级联开卡必要性 在 “东方仙盟” 相关插件开发中,使用原生 HTML 和 JavaScript 实现三级联动选择(如村庄 - 建筑 - 单元的选择)有以下好处和意义,学校管理: 对游戏体验的提升 增强交互性:玩家能够通…

SpringBoot+vue+SSE+Nginx实现消息实时推送

一、背景 项目中消息推送,简单的有短轮询、长轮询,还有SSE(Server-Sent Events)、以及最强大复杂的WebSocket。 至于技术选型,SSE和WebSocket区别,网上有很多,我也不整理了,大佬的链…

软件测试的分类

为什么要软件测试分类呢? 软件测试是软件生命周期中的一个重要的环节,基本伴随着软件整个生命周期,对软件测试分类后,我们可以根据软件生命不同阶段,进行对应的测试,这样就有助于我们条理分明,…