阿里云透露其称可以击败竞争对手的超大规模企业的数据库集群管理器

发布时间:2025年7月3日    来源:szf
阿里云透露其称可以击败竞争对手的超大规模企业的数据库集群管理器

快速阅读: 据《The Register》最新报道,阿里巴巴云推出Eigen+集群管理器,通过分析数据库实例内存使用,减少OOM错误,提升36%内存效率,优于传统超分配方法。

阿里巴巴云透露了一种集群管理器,称其可以比其超大规模云服务商更高效地运行数据库。这家中国云巨头在最近的SIGMOD/PODS会议上展示了名为《Eigen+:阿里巴巴云数据库的内存超分配》的论文[PDF],这是一场由计算机协会(ACM)主办的专注于数据库研究的活动。

这篇论文开篇指出,超大规模云服务商通常会为虚拟机分配比实际可用内存更多的内存——这种技术称为“内存超分配”,因为虚拟机并不总是使用所有分配给它们的RAM。因此,内存超分配使得每个主机上可以运行更多的虚拟机。

如果听起来有点令人担忧,你并不是唯一一个担心内存超分配的人,因为阿里巴巴云的研究人员也担心它“会增加内存不足(OOM)错误的风险,可能会损害服务可用性并违反服务级别协议。”

使用内存超分配的用户通过两种方式来避免此类事件。一种是利用历史数据预测未来的内存使用情况。他们还采用装箱算法——一种用于确定如何将不同大小的物体放入固定大小的箱子中的优化技术。可以把它想象成俄罗斯方块,但它是用来将工作负载安排到计算资源池中的。

阿里巴巴云认为,历史数据和装箱算法的结合“在提供精确预测方面往往不够,特别是在高利用率环境中,微小的预测误差可能导致关键故障。”该公司得出这一结论是基于对其自身运营的分析。

这有点尴尬,因为这篇论文是阿里巴巴云2023年描述Eigen集群管理器第一版的论文的续集。

阿里巴巴高管警告AI基础设施市场过热

随着阿里巴巴推出服务器级RISC-V CPU,北京大力支持指令集架构(ISA)

阿里巴巴云声称其模块化数据中心架构使建设时间缩短了50%

阿里巴巴云等待硬件冷却后再尝试恢复客户数据

这一次,阿里巴巴云认为它找到了一种更好的方法,将更多的数据库虚拟机装入其服务器中,方法是从帕累托原则(即80/20法则)开始,即大多数问题来自少数原因。在阿里巴巴云上运行的云数据库的情况下,这意味着“内存使用率在一周内变化超过5%的数据库实例不超过所有实例的5%,但这些实例导致了超过90%的OOM错误。”

因此,阿里巴巴云的新集群管理器Eigen+会对所有数据库实例进行分析,以检测那些具有临时内存使用的实例,并防止它们使用内存超分配。Eigen+还会模拟超分配的影响,并可以启动数据库工作负载的在线迁移,以减少整个服务器群中发生OOM错误的可能性。

阿里巴巴云的论文声称,将Eigen+应用于运行MySQL的虚拟机,使其消除了OOM错误,并提高了36%的内存分配效率,这意味着阿里云可以用更少的内存托管更多的数据库虚拟机。

因此,阿里巴巴云的新集群管理器Eigen+会对所有数据库实例进行分析,以检测那些具有临时内存使用的实例,并防止它们使用内存超分配。Eigen+还会模拟超分配的影响,并可以启动数据库工作负载的在线迁移,以减少整个服务器群中发生OOM错误的可能性。

该论文断言,Eigen+对危险数据库的分类是其云计算竞争对手AWS、Google和Microsoft所没有的,而且其集群管理能力代表了对Google的Borg、Kubernetes和Mesos等工具的改进。

当然他们会这么说——但这篇论文写得足够好,以至于ACM认为它值得在SIGMOD/PODS会议上获得一个展示机会。

(以上内容均由Ai生成)

你可能还想读

本周科技大事件:谷歌发布Pixel 10,Gamescom揭晓重磅游戏

本周科技大事件:谷歌发布Pixel 10,Gamescom揭晓重磅游戏

快速阅读: 谷歌推出Pixel 10手机及Pixel Watch 4,新增卫星紧急通讯、可更换电池和屏幕、抬手通话等功能,屏幕亮度达3000尼特,还将与斯蒂芬·库里合作推出AI健康和健身教练服务。 谷歌本周在“由谷歌制造”活动中推出了Pix […]

发布时间:2025年8月23日
SK海力士凭借HBM激增首次超越三星,领跑全球内存市场

SK海力士凭借HBM激增首次超越三星,领跑全球内存市场

快速阅读: 据《《韩国先驱报》》称,7月20日,SK海力士首登全球内存芯片市场榜首,受益于AI产品和HBM芯片领先地位。其季度利润达9.2万亿韩元,远超三星。 据韩联社报道,7月20日,韩国京畿道伊川,SK海力士首次登上全球内存芯片市场榜首 […]

发布时间:2025年8月1日
STAN 从谷歌、万代南梦宫和其他公司筹集了 850 万美元

STAN 从谷歌、万代南梦宫和其他公司筹集了 850 万美元

快速阅读: 据《印度教业务线》称,STAN获850万美元融资,由万代南梦宫等机构投资。计划拓展印度市场,加强AI功能与创作者工具。平台用户超2500万,专注移动端社交游戏。 记者获悉,8月1日,社交游戏平台STAN宣布完成850万美元的新一 […]

发布时间:2025年8月1日
“这改变了一切”:谷歌的人工智能模式迫使品牌重新考虑搜索策略

“这改变了一切”:谷歌的人工智能模式迫使品牌重新考虑搜索策略

快速阅读: 据《营销周》称,谷歌推出AI搜索模式,减少外部链接,提升对话式回答。品牌需调整策略,重视内容质量与品牌权威。此变化影响营销方式,竞争加剧。 据谷歌官方消息,7月29日,谷歌在英国推出了基于人工智能的搜索功能AI模式,此前该功能已 […]

发布时间:2025年8月1日
在 Android 上用更智能的应用程序替换 Google Assistant

在 Android 上用更智能的应用程序替换 Google Assistant

快速阅读: 据《电话竞技场》称,据报道,用户可从Google Play下载Meta AI应用,安装后需检查版本是否为230.0.0.36.164或更高。操作方法:进入设置,选择应用,查看Meta AI信息页底部的版本号。 据媒体报道,用户现 […]

发布时间:2025年8月1日
Xero 的英国董事总经理回击人工智能正在抢走会计工作的说法

Xero 的英国董事总经理回击人工智能正在抢走会计工作的说法

快速阅读: 据《UKTN(英国科技新闻)》称,英国科技媒体UKTN报道,Xero英国总经理凯特·海沃德表示,会计行业无需过度担忧AI自动化。尽管四大事务所裁员,但Xero仍持续投资AI技术,提升效率与服务质量。 据英国科技新闻网站UKTN报 […]

发布时间:2025年8月1日
Reddit 计划在搜索引擎市场大力推动人工智能与谷歌竞争:报告

Reddit 计划在搜索引擎市场大力推动人工智能与谷歌竞争:报告

快速阅读: 据《商业标准》称,Reddit CEO表示,公司正将平台转型为搜索引擎,整合AI功能,提升用户体验。Reddit Answers用户已超600万,计划全球推广。 据《The Verge》报道,7月11日,Reddit首席执行官史 […]

发布时间:2025年8月1日
Meta 超出预期,为“个人超级智能”做准备

Meta 超出预期,为“个人超级智能”做准备

快速阅读: 据《RCR无线》称,Meta二季度营收475.2亿美元,净利润183亿美元。CEO扎克伯格称将打造个人超级智能,但数据中心扩容遇挑战。公司计划2025年支出达1140-1180亿美元。 据媒体报道,7月25日,美国加州,社交媒体 […]

发布时间:2025年8月1日