上传者: 42131705
|
上传时间: 2022-02-03 21:08:17
|
文件大小: 72KB
|
文件类型: -
AWS Batch示例
目的
这是用于部署示例批处理工作流的Amazon Batch Service的示例。 该示例旨在成为可部署的工件POC。 本示例将使用CloudFormation,AWS Lambda,Docker,AWS Batch和S3存储桶触发器。
在此示例中创建的批处理工作流不是如何进行批处理的处方,而只是一个示例。 在此示例中,工作流的所有作业都被立即调度。 这样,您的调度程序可以传递环境变量或更改每个作业的命令,以指示作业在何处存储数据以及在何处期望数据。 另一种方法是让处理作业安排其依赖作业,指示那些依赖作业在何处查找其生成的数据。 可以采用多种方式使用批处理,这只是一个示例。
为什么我认为批处理很酷
AWS Batch可以为您管理基础架构,并根据队列中的作业数量进行放大或缩小。
将您的Compute Environment实例类型设置为“最佳”时,AWS Batch也能够垂直扩展。
AWS Batch可以为您自动竞价实例。
您的作业队列可以由多个计算环境处理。
您可以为竞价型实例计算环境设置首选项
当第一个计算环境不可用或工作过度时,下一个可以接管该工