百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

使用 GitLab 的 Terraform CI/CD 管道

liuian 2025-01-16 20:10 21 浏览

关注留言点赞,带你了解最流行的软件开发知识与最新科技行业趋势。


使用 GitLab 管道部署 Terraform 为管理基础设施提供了一个安全、无缝的过程,从而实现更快、更高效的部署。

基础设施即代码 (IaC) 是现代 DevOps 和敏捷团队一致、高效地管理云基础设施并提高弹性的基本实践。Terraform 已成为 IaC 的领先工具,无论组织规模如何,团队都可以跨多个提供商配置云基础设施。借助 Terraform,DevOps 工程师可以使用代码快速轻松地管理云基础架构,从而加快部署过程并确保一致性。

除了 Terraform,GitLab 已成为开发人员和 DevOps 工程师进行 CI/CD 管理的热门选择。GitLab 与不同工具的广泛集成可以更好地管理部署过程,使其成为希望简化 DevOps 工作流程的组织的必备工具。通过利用 Terraform 和 GitLab,组织可以高效且有效地管理其云基础架构和部署流程,从而改进其整体 DevOps 流程。

GitLab 的优势

让我们看看 Terraform 和 GitLab 一起提供的一些优势,以及如何集成 GiLlab 和 Terraform 以管理云基础设施的演练。

  1. Terraform 状态管理: GitLab 可用于管理您的 Terraform 状态文件,这有助于确保您的基础设施得到一致且正确的管理。
  2. 与其他 GitLab 功能集成:您可以使用 GitLab 的问题跟踪、项目管理和其他功能来更好地管理您的 Terraform 项目。
  3. GitOps 原则: 整合 GitOps 部署和基础架构即代码 (IaC) 工作流程。
  4. GitLab 管道: GItlab 提供托管管道功能,无需管理任何专用服务器,如 Jenkins

核心概念

出于演示目的,我们已将 terraform 代码发布到公共GitLab存储库。

地形状态

Terraform 状态就像用于基础设施部署的数据库。它跟踪所有由 Terraform 部署和管理的云资源。

使用 GitLab,您可以:

  1. 对 Terraform 状态文件进行版本控制。
  2. 对传输中和静止时的状态文件进行加密。
  3. 锁定和解锁状态。
  4. 远程执行 terraform plan 和 terraform apply 命令。

亚搏体育应用程序管道

GitLab 提供 CI/CD 管道,这些管道是在项目存储库根目录中的 gitlab-ci.yml 文件的帮助下定义的。管道功能最初是为应用程序代码部署而设计的,但现在也广泛用于管理基础设施部署。

流水线工作流程

一个典型的管道包括 GitLab 的基于标准合并请求的基础设施部署工作流

对于所需的任何基础架构更改,都会从主线分支创建功能分支。完成所需的更改后,将提出合并请求以将更改集成到主线分支中,例如main。

根据此工作流,为来自主分支的基础设施更改请求创建一个新分支(例如,分支名称 —
CR1/demo_change_request_for_vpc)。然后对该分支进行必要的更改,并在 GitLab 中提出合并请求以供审查。

一旦 MR 被提升,管道就会被触发以执行与最近更改的第一级检查相关的某些地形任务。这是第 1 阶段,其中包括:

  1. Prepare:初始化terraform代码,下载依赖模块
  2. 验证:使用terraform validate 命令验证 terraform 源代码是否存在任何编码错误和不正确的引用
  3. 计划:生成一个计划,描述在触发地形执行时对现有基础设施的更改。此步骤有助于评估更改并就是否进一步进行基础架构更改做出正确的决定

然后将生成的计划 [文件] 保存为管道工件,以确保在此合并请求获得批准时应用准确的计划更改

在审查并批准合并请求后,变更将合并到分支中,进入管道的第 2 阶段,这一次,采用预先生成的计划并将变更应用到云部署。步骤是

  1. 获取计划文件
  2. 应用:将计划的更改应用到基础架构。这可以是创建或更新操作,可能需要替换某些资源。因此,在批准申请之前仔细评估计划。

整个工作流程在gitlab-ci.yml 文件中定义。

管道在行动

充分解释概念并准备好代码后,下一步是为 AWS 云资源配置设置部署管道。我们将逐步指导如何构建此管道和预期的输出结果。

连接 AWS 云

您的 AWS 帐户的凭据可以在变量部分下配置 <提及路径,例如,设置 -> CI/CD-> 变量(需要屏蔽敏感令牌)

设置 Terraform 状态后端

GitLab 在 Terraform 的 backend.tf文件中配置为远程状态存储后端。

用于后端配置的 GitLab 项目特定配置在 .gitlab-ci.yml 文件的变量部分中定义。

触发管道

为了模拟上面解释的行为,在核心概念部分,

  • 从主分支创建一个新分支
  • 进行更改,提交并推送代码
  • 在此处创建合并请求并检查管道执行 → CI/CD → 管道
  • 管道成功执行后,可以通过检查管道日志来检查生成的计划
  • 打开合并请求并查看代码更改。
  • 根据代码更改和管道执行信息,如果一切正常,批准合并请求
  • 再次监视管道以了解通过分支部署的更改的进度
  • 当部署管道显示绿色时,这意味着所有更改都已成功部署,这是个好消息!
  • 但是,如果出现问题并且管道显示失败,请重新检查上述步骤以防遗漏任何内容。

清理

gitlab-ci.yml 文件的最后阶段包括销毁 清理 操作。手动批准后,它会执行 terraform destroy 命令。

  • 这是作为一个方便的操作添加的,用于清理作为此博客的一部分创建的资源
  • 只需返回任何成功执行的管道并单击销毁按钮

概括

让我们总结一下整个部署过程及其帮助:

  1. 安全的代码管理: GitLab 管道为管理代码更改提供了一个安全的环境,确保只有授权人员才能进行更改。
  2. 顺畅的基础设施维护:管道的使用使得维护基础设施变得更加容易,减少了对额外工具的需求。
  3. 集成 SCM 和 CI/CD: SCM 与 CI/CD 的集成是无缝的,使管道成为代码管理过程的自然扩展。
  4. 简化的部署过程:减少对本地系统的依赖以安装任何工具和库。
  5. 多功能后端配置:后端配置也可以通过 GitLab 管道进行管理,增加了它们的多功能性。
  6. 改进协作:一起使用 GitLab 和管道可以改进团队内部的协作,从而实现更好的代码管理。
  7. 强大的社区支持: GitLab 和 Terraform 是广泛使用的工具,具有强大的社区支持,可在需要时提供资源访问和帮助。

相关推荐

GANs为何引爆机器学习?这篇基于TensorFlow的实例教程为你解惑!

「机器人圈导览」:生成对抗网络无疑是机器学习领域近三年来最火爆的研究领域,相关论文层出不求,各种领域的应用层出不穷。那么,GAN到底如何实践?本文编译自Medium,该文作者以一朵玫瑰花为例,详细阐...

高丽大学等机构联合发布StarGAN:可自定义表情和面部特征

原文来源:arXiv、GitHub作者:YunjeyChoi、MinjeChoi、MunyoungKim、Jung-WooHa、SungKim、JaegulChoo「雷克世界」编译:嗯~...

TensorFlow和PyTorch相继发布最新版,有何变化

原文来源:GitHub「机器人圈」编译:嗯~阿童木呀、多啦A亮Tensorflow主要特征和改进在Tensorflow库中添加封装评估量。所添加的评估量列表如下:1.深度神经网络分类器(DNNCl...

「2022 年」崔庆才 Python3 爬虫教程 - 深度学习识别滑动验证码缺口

上一节我们使用OpenCV识别了图形验证码躯壳欧。这时候就有朋友可能会说了,现在深度学习不是对图像识别很准吗?那深度学习可以用在识别滑动验证码缺口位置吗?当然也是可以的,本节我们就来了解下使用深度...

20K star!搞定 LLM 微调的开源利器

LLM(大语言模型)微调一直都是老大难问题,不仅因为微调需要大量的计算资源,而且微调的方法也很多,要去尝试每种方法的效果,需要安装大量的第三方库和依赖,甚至要接入一些框架,可能在还没开始微调就已经因为...

大模型DeepSeek本地部署后如何进行自定义调整?

1.理解模型架构a)查看深度求索官方文档或提供的源代码文件,了解模型的结构、输入输出格式以及支持的功能。模型是否为预训练权重?如果是,可以在预训练的基础上进行微调(Fine-tuning)。是否需要...

因配置不当,约5000个AI模型与数据集在公网暴露

除了可访问机器学习模型外,暴露的数据还可能包括训练数据集、超参数,甚至是用于构建模型的原始数据。前情回顾·人工智能安全动态向ChatGPT植入恶意“长期记忆”,持续窃取用户输入数据多模态大语言模型的致...

基于pytorch的深度学习人员重识别

基于pytorch的深度学习人员重识别Torchreid是一个库。基于pytorch的深度学习人员重识别。特点:支持多GPU训练支持图像的人员重识别与视频的人员重识别端到端的训练与评估简单的re...

DeepSeek本地部署:轻松训练你的AI模型

引言:为什么选择本地部署?在AI技术飞速发展的今天,越来越多的企业和个人希望将AI技术应用于实际场景中。然而,对于一些对数据隐私和计算资源有特殊需求的用户来说,云端部署可能并不是最佳选择。此时,本地部...

谷歌今天又开源了,这次是Sketch-RNN

前不久,谷歌公布了一项最新技术,可以教机器画画。今天,谷歌开源了代码。在我们研究其代码之前,首先先按要求设置Magenta环境。(https://github.com/tensorflow/magen...

Tensorflow 使用预训练模型训练的完整流程

前面已经介绍了深度学习框架Tensorflow的图像的标注和训练数据的准备工作,本文介绍一下使用预训练模型完成训练并导出训练的模型。1.选择预训练模型1.1下载预训练模型首先需要在Tensorf...

30天大模型调优学习计划(30分钟训练大模型)

30天大模型调优学习计划,结合Unsloth和Lora进行大模型微调,掌握大模型基础知识和调优方法,熟练应用。第1周:基础入门目标:了解大模型基础并熟悉Unsloth等工具的基本使用。Day1:大模...

python爬取喜马拉雅音频,json参数解析

一.抓包分析json,获取加密方式1.抓包获取音频界面f12打开抓包工具,播放一个(非vip)视频,点击“媒体”单击打开可以复制URL,发现就是我们要的音频。复制“CKwRIJEEXn-cABa0Tg...

五、JSONPath使用(Python)(json数据python)

1.安装方法pipinstalljsonpath2.jsonpath与Xpath下面表格是jsonpath语法与Xpath的完整概述和比较。Xpathjsonpath概述/$根节点.@当前节点...

Python网络爬虫的时候json=就是让你少写个json.dumps()

大家好,我是皮皮。一、前言前几天在Python白银交流群【空翼】问了一个Python网络爬虫的问题,提问截图如下:登录请求地址是这个:二、实现过程这里【甯同学】给了一个提示,如下所示:估计很多小伙伴和...