在线、离线业务融合场景,天均CPU利用率提升至55% | 创新场景

在线集群CPU利用率提升8%-15%不等,部分存储集群利用率提升可达20%以上。

场景描述

图片系AI生成

图片系AI生成

在线服务资源使用量随着终端用户的使用习惯呈现出稳定的潮汐现象,夜间CPU利用率极低,导致集群均值CPU利用率较低;业务保有大量的独占资源池,资源池割裂产生大量的资源碎片,拉低CPU利用率;业务为了稳定性考虑,会过量囤积资源,进一步拉低CPU利用率。

解决方案

点击报名参与创新场景50的评选

在阿里云的协助下,小红书混部技术经历了四个阶段演进:闲置资源再利用、整机腾挪分时复用、常态混部、统一调度。

一,通过技术手段将集群中的闲置资源收集起来,分配给转码类业务场景使用;

二,通过弹性能力(HPA),在凌晨业务低峰期按比例对在线业务缩容,腾挪空出整机,并将转码、训练等离线pod在该时段运行起来,起到利用率“填谷”的效果;

三,平台持续推进业务大规模合池,将业务由独占池迁至平台托管的公共混部池,通过合池、资源超卖等技术手段,CPU分配率得到有效提升,同时通过建设更为细粒度的资源管理与调度能力来实现均值利用率提升的目标;

四,混合云架构的统一调度来管理异构计算资源,并支持各类业务形态的工作负载调度能力。

成效

通过大规模容器混部的持续推进,小红书在资源成本效能上有显著改善。

在CPU利用率方面,在线混部集群天均CPU利用率提升至45%以上,部分集群天均CPU利用率可稳定提升至55%。在线集群CPU利用率提升8%-15%不等,部分存储集群利用率提升可达20%以上。在资源成本方面,为小红书各类离线场景提供数百万核时的低成本算力。混部集群CPU分配率提升至125%以上,相较于独占资源池,资源碎片率明显下降。

「关于创新场景50」

场景不是案例,它更加精准、也更加抽象。数字化就是创新场景的不断叠加和迭代。

在此背景下,钛媒体重磅推出「创新场景50」评选,每年遴选并解读50个全行业与业务深度融合的创新性场景及其解决方案,并在钛媒体年度ITValue Summit 数字价值年会上隆重颁奖、深度交流。

目前场景正在征集中,更精准的解读、更广泛的曝光、更强大的品牌势能,欢迎你提出问题,更欢迎你留下解决的方法和工具。点击这里投递更多场景信息

点击进入2024 ITValue Summit数字价值年会,了解更多信息。

转载请注明出处、作者和本文链接
声明:文章内容仅供参考、交流、学习、不构成投资建议。
想和千万钛媒体用户分享你的新奇观点和发现,点击这里投稿 。创业或融资寻求报道,点击这里
发表评论
0 / 300

根据《网络安全法》实名制要求,请绑定手机号后发表评论

登录后输入评论内容

快报

更多

2025-03-23 22:46

香港财政司司长陈茂波:香港正通过构建“耐心资本”生态支持科创发展

2025-03-23 22:22

高通总裁安蒙谈DeepSeek:人工智能模型正在变得更小、更有能力

2025-03-23 21:52

香港财政司司长陈茂波:稳步深化互联互通,积极开拓中东等地区的新资金来源

2025-03-23 21:25

上海贝岭:部分高管拟合计减持不超13.4万股公司股份

2025-03-23 21:19

富佳股份:股东拟减持不超6.57万股公司股份

2025-03-23 20:59

亚光股份:股东拟减持不超1%公司股份

2025-03-23 20:51

中国贸促会会长会见苹果公司CEO库克

2025-03-23 20:49

四川眉山市市场监督管理局:对千禾味业产品抽查23批次,均符合国家标准

2025-03-23 20:27

马克·古尔曼:苹果公司致力于为手表添加摄像头

2025-03-23 20:10

3月23日新闻联播速览22条

2025-03-23 19:54

海利生物:股东拟减持不超2%公司股份

2025-03-23 19:46

自由现金流主题基金申报数量已达36只

2025-03-23 19:46

小米在日本开设首家门店

2025-03-23 19:04

和达科技:股东拟减持不超1%公司股份

2025-03-23 18:57

美国参议员现身中国发展高层论坛

2025-03-23 18:15

朱民:从中国国内产业链延伸的全球产业链开始初步展现,稳定全球产业链

2025-03-23 17:55

蔡昉:农村养老难需靠尽快缩小城乡基本公共服务差别等措施来解决

2025-03-23 17:27

本周新增爱购控股1家境外上市备案企业

2025-03-23 17:27

本周新增名瑞智能、胜华波电器等4家上市辅导备案企业

2025-03-23 17:17

中国工商银行行长刘珺:金融机构需从资金中介向综合服务提供商转变

扫描下载App