如何解决什么代表 Cloud Build 中的 STEP
实际上我正在开发一个管道,在那里之前一切都很好,因为它已经奏效了。但是当我想解释时,我不清楚每个步骤在物理上代表什么,例如一个步骤“可能”是集群中的一个节点。请,如果有人对此有明确的解释,请向我们解释。>
- 步骤示例 1
文件配置云构建:
steps:
- name: "gcr.io/google.com/cloudsdktool/cloud-sdk"
args: ["bin/deploy-dags-composer.sh"]
env:
- 'COMPOSER_BUCKET=${_COMPOSER_BUCKET}'
- 'ARTIFACTS_BUCKET=${_ARTIFACTS_BUCKET}'
id: 'DEPLOY-DAGS-PLUGINS-DEPENDS-STEP'
Bash 文件
#! /bin/bash
gsutil cp bin/plugins/* gs://$COMPOSER_BUCKET/plugins/
gsutil cp bin/dependencies/* gs://$ARTIFACTS_BUCKET/dags/dependencies/
gsutil cp bin/dags/* gs://$COMPOSER_BUCKET/dags/
gsutil cp bin/sql-scripts/* gs://$ARTIFACTS_BUCKET/path/bin/sql-scripts/composer/
- 示例 2 的几个步骤
文件配置云构建
steps:
- name: gcr.io/cloud-builders/gsutil
args: ['cp','*','gs://${_COMPOSER_BUCKET}/plugins/']
dir: 'bin/plugins/'
id: 'deploy-plugins-step'
- name: gcr.io/cloud-builders/gsutil
args: ['cp','gs://${_ARTIFACTS_BUCKET}/dags/dependencies/']
dir: 'bin/dependencies/'
id: 'deploy-dependencies-step'
- name: gcr.io/cloud-builders/gsutil
args: ['cp','gs://${_COMPOSER_BUCKET}/dags/']
dir: 'bin/dags/'
id: 'deploy-dags-step'
- name: gcr.io/cloud-builders/gsutil
args: ['cp','gs://${_ARTIFACTS_BUCKET}/projects/path/bin/sql-scripts/composer/']
dir: 'bin/sql-scripts/'
id: 'deploy-scripts-step'
解决方法
在 Cloud Build 中,步骤是处理的一个阶段。此阶段由要加载的容器描述,其中包含在该阶段执行处理所需的二进制文件。
对于这个容器,你可以定义一个入口点,在容器中运行的二进制文件,以及传递给它的参数。
您还有几个选项可以看到 here。
要理解的一个重要概念是,只有 /workspace
目录从一个步骤到另一个步骤保持不变。在每一步结束时,容器都被卸载,你丢失了内存中的所有数据(如环境变量)和存储在 /workspace
目录之外的数据(如系统依赖安装)。请记住这一点,许多问题都来自于此。
编辑 1:
在一个步骤中,您可以开箱即用地在一个容器上运行 1 个命令。 gsutil、gcloud、mvn、node ……一切都取决于您的容器和入口点。
但是当您需要在同一个容器上运行许多命令时,有一个有用的高级容量。它可能因多种原因而发生。你可以这样做
- name: 'gcr.io/cloud-builders/gcloud'
entrypoint: 'bash'
args:
- -c
- |
MY_ENV_VAR=$(curl -H "Metadata-Flavor: Google" http://metadata.google.internal/computeMetadata/v1/instance)
echo $${MY_ENV_VAR} > env-var-save.file
# Continue the commands that you need/want ....
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。