Cloud Foundry Job图文详解

简介: 本文以e2e-test-release项目为原型介绍如何开发一个可以部署到Cloud Foundry集群的Job Release。

Cloud Foundry集群上运行的是一组Job,这些 Job由开发者以release包的形式提供,利用BOSH命令部署到集群节点上。如下图所示:

image

相关概念

  • Release: Bosh定义的一组Job的集合,用来在集群上进行部署。可以简单理解为运行Job所需要的源码、二进制包、安装脚本的压缩包。
  • Job: 运行在Cloud Foundry节点上的应用/进程。
  • Package: job的依赖包

Release源码结构

初始化一个Release项目的命令如下:

bosh init-release --dir e2e-test-release

自动生成如下目录结构:

$ tree .
.
├── config
│   └── blobs.yml
├── jobs            # 一组应用或服务的定义,例如:postgres服务
├── packages        # 运行Job所需的依赖的描述。这里分两种依赖:源码依赖和二进制依赖
├── src             # 存放依赖源代码
└── blobs           # 存放依赖二进制

Job

初始化Job的命令如下:

bosh generate-job slb-registration-test

生成Job目录结构如下:

$ tree e2e-test-release
e2e-test-release
├── blobs
├── config
├── jobs
│   ├── slb-registration-test
│   │   ├── monit                    # monit服务会调用这个脚本,检查应用的健康状态,汇报给BOSH
│   │   ├── spec                     # job的描述文件
│   │   └── templates
│   │        └── run.erb             # 应用启动和停止的脚本
├── packages
└── src

spec 是job的元信息配置文件,其结构如下:

---
name: slb-registration-test        # job名称,写manifest的时候一一对应
templates:                         # templates目录下的文件,放置到vm的哪个位置上
  run.erb: bin/run                 # 把templates/run.erb复制到vm的/var/vcap/jobs/slb-registration-test/bin/run
packages:                          # 当前job需要依赖哪些package
- aliyun_py
- aliyun_python_sdk_slb
properties:                        # 定义用户可以在manifest中配置值传给job ctl
  access_key:
    description: The Alicloud Access Key
  secret_key:
    description: The Alicloud Access Secret Key

Package

初始化Package命令如下:

bosh generate-package aliyun_py

package目录结构如下:

$ tree packages
packages
└── aliyun_py              # 名称
    ├── packaging          # 安装脚本
    └── spec               # 元信息

spec 是package的元信息配置文件,其结构如下:

---
name: aliyun_py             # package名称
dependencies:               # 依赖名称
- aliyun_python_sdk_slb
files:                      # 在编译阶段,如何找到源码或者二进制依赖. 源码则在src目录下进行查找,二进制在blobs目录下查找
  - action/**/* 

Blob

Package依赖的源码是直接放到项目的src目录下的,但是二进制文件体积较大,而且非源码不适合做版本控制,所以二进制文件放到远程BlobStore上。

添加Blob到项目的命令如下:

bosh add-blob ~/Downloads/aliyun-python-sdk-slb-3.2.1.tar.gz sdk_slb/aliyun-python-sdk-slb-3.2.1.tar.gz

在编译阶段,aliyun-python-sdk-slb-3.2.1.tar.gz会放置到blobs/sdk_slb目录下

Create Release

生成release包的命令如下:

bosh create-release --force

manifest

在manifest中定义job信息如下:


instance_groups:
  - name: srt
    jobs:
      - name: slb-registration-test           # 前面定义的job名称
        release: e2e-test                     # release名称
        properties:                           # job spec中定义的配置,值会传到 job脚本中
          access_key: ((access_key))
          secret_key: ((secret_key))

划重点

Release意义在于打包、编译、部署、运行Job到CLoud Foundry,利用monit监控和管理应用状态。那么关键所在是Job,Job生命周期如下图:

image

部署的时候,会把release目录下的内容复制到vm的/var/vcap目录下;job的日志会写到/var/vcap/sys/log/JOB_NAME文件中。

image

源码地址

最后

欢迎PaaS生态上的合作伙伴和开发者参与Cloud Foundry社区的建设,也欢迎大家来阿里云构建企业自己的PaaS平台。任何问题和建议可以在Github上提Issue

相关实践学习
部署高可用架构
本场景主要介绍如何使用云服务器ECS、负载均衡SLB、云数据库RDS和数据传输服务产品来部署多可用区高可用架构。
负载均衡入门与产品使用指南
负载均衡(Server Load Balancer)是对多台云服务器进行流量分发的负载均衡服务,可以通过流量分发扩展应用系统对外的服务能力,通过消除单点故障提升应用系统的可用性。 本课程主要介绍负载均衡的相关技术以及阿里云负载均衡产品的使用方法。
目录
相关文章
|
弹性计算 IDE 安全
Alibaba Cloud Toolkit:本地应用一键部署到任何机器上
Alibaba Cloud Toolkit:本地应用一键部署到任何机器上
928 0
Alibaba Cloud Toolkit:本地应用一键部署到任何机器上
|
1月前
|
关系型数据库 MySQL 中间件
KubeSphere 核心实战之四【在kubesphere平台上部署Ruoyi-cloud项目】(实操篇 4/4)
KubeSphere 核心实战之四【在kubesphere平台上部署Ruoyi-cloud项目】(实操篇 4/4)
59 1
|
4月前
|
Java 调度 Docker
Spring Boot 3 整合 xxl-job 实现分布式定时任务调度,结合 Docker 容器化部署(图文指南)
Spring Boot 3 整合 xxl-job 实现分布式定时任务调度,结合 Docker 容器化部署(图文指南)
Spring Boot 3 整合 xxl-job 实现分布式定时任务调度,结合 Docker 容器化部署(图文指南)
|
10月前
|
Kubernetes 负载均衡 Cloud Native
Spring Cloud Kubernetes使用全解(一)—官方原版
Spring Cloud Kubernetes使用全解(一)—官方原版
11564 2
|
10月前
|
Kubernetes 负载均衡 安全
Spring Cloud Kubernetes使用全解(二)—官方原版
Spring Cloud Kubernetes使用全解(二)—官方原版
343 0
|
Kubernetes Java Linux
spring-cloud-kubernetes官方demo运行实战
spring-cloud-kubernetes是springcloud官方推出的开源项目,用于将Spring Cloud和Spring Boot应用运行在kubernetes环境,并且提供了通用的接口来调用kubernetes服务,今天就来初步体验一下。
573 0
spring-cloud-kubernetes官方demo运行实战
|
Shell API Go
Cloud Foundry 1. 快速入门
Cloud Foundry 1. 快速入门
Cloud Foundry 1. 快速入门
|
SQL 消息中间件 Prometheus
spring cloud 二代架构依赖组件 docker全配置放送
Spring Cloud Alibaba 主要包含 Sentinel、Nacos、RocketMQ、Dubbo、Seata 等组件。 二代引入了 Spring Cloud Alibaba
spring cloud 二代架构依赖组件 docker全配置放送
|
Kubernetes Ubuntu 应用服务中间件
使用Gardener在Google Cloud Platform上创建Kubernetes集群
使用Gardener在Google Cloud Platform上创建Kubernetes集群
213 0