近日，阿里云提出的计算池化解决方案“Aegaeon ”成功入选顶级学术会议SOSP 2025 ，该方案可解决AI模型服务中普遍存在的GPU资源浪费问题 ，大幅提升GPU资源利用率，目前其核心技术已应用在阿里云百炼平台。
SOSP（操作系统原理研讨会）由ACM SIGOPS主办 ，是计算机系统领域顶级学术会议 ，平均每年收录的论文数量仅有数十篇，被誉为计算机操作系统界的“奥斯卡 ” ，入选论文代表了操作系统和软件领域最具代表的研究成果 。本届SOSP大会上 ，系统软件与AI大模型技术的融合成为新的趋势 。
数据显示，在阿里云模型市场为期超三个月的Beta测试中 ，Aegaeon系统在服务数十个参数量高达720亿的大模型时 ，所需的英伟达H20 GPU数量从1192个减至213个，削减比例高达82%（见下图）。GPU用量削减82%意味着公司硬件采购成本将显著降低，这对于动辄使用成千上万张GPU的大型模型服务商至关重要 。
在真实的模型服务场景中 ，少数热门模型（如阿里的Qwen）承载了绝大多数用户请求 ，而大量不常被调用的“长尾”模型却各自独占着GPU资源 。数据显示，在阿里云模型市场中 ，曾有17.7%的GPU算力仅用于处理1.35%的请求 ，资源闲置严重。
而Aegaeon系统通过GPU资源池化，打破了“一个模型绑定一个GPU ”的低效模式 。
Token级调度是该系统的核心创新点 ，Aegaeon多模型混合服务系统在每次生成下一个token后动态决定是否切换模型 ，实现精细化管理，同时 ，通过组件复用 、显存精细化管理和KV缓存同步优化等全栈技术 ，Aegaeon将模型切换开销降低97%，确保了token级调度的实时性 ，可支持亚秒级的模型切换响应 。
据介绍 ，Aegaeon系统支持单GPU同时服务多达7个不同模型，相比现有主流方案提升1.5-9倍的有效吞吐量，实现2-2.5倍的请求处理能力。
如何从底层系统软件层面优化 ，以更好地支撑和赋能上层AI应用 ，已成为全球学术界和工业界关注的焦点 。未来AI的发展将不仅依赖于硬件算力的单纯增长，更需要通过系统级的软件创新来深度挖掘现有硬件的潜力 。
免费配资炒股配资平台:股票杠杆怎么操作-突发！美国大动作！特朗普最新宣布：不会削减国防预算
股票杠杆平台软件:正规的股市怎么加杠杆-1927亿美元！风投史上首次：AI领域年内“吸金”占比过半
在手机上怎么玩股票:配资平台炒股-征途IP与AI业务高歌猛进 海外收入却“拖后腿” 刘伟重掌巨人网络帅印 能否破局全球化？
股票开户在网上要怎么开:配资炒股投资-阿里大招引爆！一图梳理AI应用端概念
炒股多少钱可以加杠杆:可靠的股票杠杆平台-BAT资本开支飙升168%！机构调升阿里、“寒王”目标价 AI基建迎价值重估？
股票如何短线操作降低成本:怎么配资炒股平台网址-“股神”也卖飞？苹果股价创新高 巴菲特错失500亿美元收益
股指配资股市有哪些-网上配资炒股-股民配资平台提示：文章来自网络，不代表本站观点。
暑运过半，从7月航旅市场表现来看，财联社记者多方采访获悉，国内民航、酒店均呈量增价跌之势，市场竞争表现激烈，暑运后半...
7月16日，首次参加链博会的英伟达展台来了不少寻找“H20”芯片服务器的观展人员。英伟达展出了交换机、搭载英伟达GP...
记者辛圆3月25日，博鳌亚洲论坛旗舰报告《亚洲经济前景及一体化进程2025年度报告》（以下简称《报告》...
3月24日，AI眼镜概念股开盘拉升，瀛通通讯直线涨停，明月镜片涨超10%，比依股份、博士眼镜、恒玄科技、国光电器等跟涨。...
3月24日，易方达国证自由现金流ETF公开发售。该产品跟踪国证自由现金流指数，这个指数是什么？有哪些优势？投资价值如何？...
记者闫桂花 王珍中国社会科学院学部委员、中国社会科学院原副院长高培勇周日在“中国发展高层论坛2025年...
当地时间3月24日，特斯拉美股涨幅扩大至5%，现报262.055美元/股。...
记者王珍中国国际经济交流中心副理事长、国务院发展研究中心原副主任王一鸣周一在“中国发展高层论坛2025...
