变革,从人工到弹性部署
时间:2022-04-12 21:15:01 | 来源:行业动态
时间:2022-04-12 21:15:01 来源:行业动态
在云计算行业有一个趋势,随着大数据技术的普及,对实时性要求不高的计算任务集群规模越来越大,甚至超过在线服务。于是京东云技术团队开始思考,是否能把离线计算任务与在线服务进行混合部署,在弹性资源基础上提升集群资源利用率。
最早的618支持基本依靠人工,技术团队每个成员紧盯服务器系统资源,哪里有空闲立刻调过来支援。系统架构升级后,100%服务资源自有,但随着购物节规模指数级增长,添置服务器成为浩资巨大的烧钱工程。高出日常峰值的机器过后闲置,又不可避免地造成资源浪费。
于是从2016年开始,京东云技术团队尝试将延迟不敏感的计算任务和延迟敏感的在线服务部署到同一集群上运行,让在线服务的空闲资源充分被计算任务所使用,以提高集群的整体利用率,也就是混部技术的应用。