如何解决有多少执行者在kubernetes中部署了气流
我是Airflow和kubernetes的新手。
我已按照本指南部署了气流:https://docs.bitnami.com/tutorials/deploy-apache-airflow-azure-postgresql-redis/
我知道执行者是celeryExecutor。我试图将其更改为kubernetesexecutor,但我真的不知道该怎么做。
我已经阅读到celery执行器为每个任务创建静态工作程序,而kubernetes执行器为每个任务创建一个pod。
我不知道我的芹菜执行者部署了多少工人,以及如何增加他们。
解决方法
我假设您使用Bitnami Helm chart将Airflow部署到Kubernetes中。
在值文件中,配置设置airflow.worker.replicas
控制将部署的工作容器数量。默认值为2。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。