批量计算
批量计算(BatchCompute)是一种适用于大规模并行批处理作业的分布式云服务。可支持海量作业并发规模,系统自动完成资源管理,作业调度和数据加载,并按实际使用量计费。广泛应用于电影动画渲染、生物数据分析、多媒体转码、金融保险分析、科学计算等领域。

产品优势

大规模并发
支持10万核级别以上并发,加速计算过程
简单易用
一键提交作业,自动完成资源管理、作业调度
分布式缓存加速I/O
通过独有分布式缓存技术加速共享数据访问,大幅提升I/O效率
丰富的行业解决方案
提供面向影视动画渲染、基因数据分析等行业解决方案

产品功能

资源管理批量计算通过集群管理计算资源,用户创建批量计算集群即可在云上部署大规模的计算节点。
丰富的资源类型支持按量使用常见ECS实例类型及批量计算特有BCS实例类型。另外通过指定竞价策略使用竞价实例,进一步降低计算成本。
多实例组支持单集群支持多个实例组,使用不同实例类型应对工作负载,灵活配置解除资源和规模限制。
用户自定义计算环境官方提供常见Windows、Linux基础镜像,用户以此为基础制作自定义镜像,定制计算环境。另外提供公共镜像,开箱即用。
网络支持托管网络和自定义网络方案,轻松与OSS、NAS、ECS、RDS等其他云产品集成。
作业调度批量计算提供了强大的作业管理及作业调度能力,用户创建批量计算作业即可运行各种类型的工作负载。
并行处理大规模数据及工作负载分散到多个计算节点上并发执行,提高数据处理速度,缩短交付时间。
有向无环图通过有向无环图(DAG)的方式指定任务间的依赖关系,轻松构建复杂工作流。
断点重启作业失败无需重新计算所有步骤,重启任务仅执行失败和未运行部分,节省时间和计算成本。
自动集群自动集群AutoCluster将计算资源与作业生命周期绑定,计算资源随作业规模自动伸缩。用户无需关心计算资源的创建和释放,简化资源管理,节省计算成本。
自动释放通过配置作业释放策略,可实现作业失败继续保留、作业成功自动释放。配合消息通知功能,简化用户业务逻辑。
数据访问批量计算自研存储插件,解决大规模计算场景下数据访问的难题。
文件接口访问对象存储OSS支持将对象存储OSS挂载到计算节点的本地文件系统,程序可以通过文件系统接口访问对象存储数据,无缝兼容传统软件上云。
分布式缓存通过分布式缓存大幅加速共享数据的并发读取,大规模电影渲染场景效率提升5到10倍。支持对象存储OSS和文件存储NAS。
文件挂载和虚拟目录挂载单个OSS文件到计算节点或将多个分散的文件组织成虚拟目录进行挂载,用户可以按最小权限原则授权其他用户进行数据访问。

应用场景

影视渲染
基因数据分析
大幅提升渲染效率
批量计算的高效集群管理可以帮助您轻松调度十万核以上的计算资源进行渲染,并且通过独有分布式缓存技术大幅提升共享场景文件的加载性能。同时提供简单易用的渲染管理系统,无需编程实现云上渲染。
能够解决
分布式缓存
无论使用OSS还是NAS,通过简单的配置指定数据源就可以启动分布式缓存功能。缓存加速能力随着集群规模线性扩展,解决大规模渲染场景下素材加载慢的痛点。
灵活易用
用户可以通过集群模式搭建混合云渲染环境,也可以通过作业模式实现自动的资源管理和作业调度。批量计算还提供了方便易用的命令行工具和渲染管理系统,大大减少云渲染系统搭建的投入。
节省成本
用户只需要支付实际消耗的计算和存储费用,批量计算提供的资源管理、作业调度和分布式缓存功能不收取额外费用。大幅减少传统渲染调度软件的license成本。
推荐搭配使用
轻松实现大批量样本分析
支持基于有向无环图轻松构建复杂工作流,结合批量计算独有的分布式缓存技术和OSS挂载功能,无需特别编程就可以实现稳定高效的大规模样本分析。
能够解决
工作流构建
通过有向无环图的方式指定任务间的依赖关系实现工作流构建。批量计算根据指定的依赖关系保障任务的执行顺序。并且支持通过数据切分的方式实现相同逻辑的并发处理。
支持多种数据源
批量计算任务可以支持OSS和NAS的数据处理。独有OSS挂载功能可以支持程序通过文件接口访问对象存储数据。
简单易用
提供易用强大的命令行工具,用户可以通过编辑配置文件实现工作流构建,并通过简单的命令提交管理作业。无需特殊编程实现流程上云。
推荐搭配使用

产品动态

2016-12-27 新功能
[批量计算] 消息通知功能发布
查看详情
2017-03-28 新功能
批量计算支持竞价型实例
查看详情
2017-03-28 新功能
批量计算支持NAS存储
查看详情
2017-05-20 新功能
增加专有网络VPC模式的支持
查看详情
2017-06-29 新功能
OSS挂载支持自定义分布式缓存参数配置
查看详情
2017-07-06 体验优化
支持自动配置磁盘类型
查看详情
2017-08-03 新功能
批量计费竞价实例支持分钟计费
查看详情
2017-09-13 新功能
批量计算竞价实例接口更新
查看详情
2017-10-10 新功能
批量计算-WDL工作流及GATK4.0版本支持
查看详情
2017-11-02 新地域/可用区
批量计算上海区域开服
查看详情
2017-11-03 新功能
批量计算全面支持企业级ECS实例
查看详情
2018-02-01 体验优化
重构集群状态优化用户体验
查看详情
2018-02-28 新功能
批量计算-Sun Grid Engine集群支持发布
查看详情
2018-03-30 新版本/新规格
GATK 4.0正式版发布
查看详情
2018-05-21 新功能
批量计算预付费模式发布
查看详情
2018-06-28 体验优化
批量计算节点监控功能发布
查看详情
查看全部日志

文档与工具