从 GPU 共享到异构算力底座:为什么我看好 HAMi?

边缘计算社区 2026-07-08 21:06
一直以来,我都很关注 HAMi 
昨天收到 Jimmy Song 老师的邀请,再谈一下 HAMi 这个项目吧。从 GPU 共享到异构算力底座:为什么我看好 HAMi?图1 首先,抛出我的观点,相对于 K8s=“云原生”事实的代名词,我非常看好 HAMi后续成为 “异构算力”的代名词。
因为GPU、NPU、DCU 等异构算力正在从少数团队的专用资源,变成越来越多企业必须长期管理和持续运营的基础设施,HAMi简直是为解决异构算力而生的。从 GPU 共享到异构算力底座:为什么我看好 HAMi?图2


2026 年 7 月 2 日,HAMi 正式晋升为 CNCF Incubating(孵化)项目。
这对 HAMi 社区来说,是一个很重要的里程碑。它意味着 HAMi 已经从早期探索阶段,进入了更成熟、更稳定,也更受全球云原生生态认可的新阶段。
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图3
但这件事的意义,不只是“一个开源项目升级了”。
HAMi 的成长,正好发生在 AI 基础设施快速重构的关键时期。GPU、NPU、DCU 等异构算力正在越来越多地进入企业生产系统。随之而来的问题也越来越清晰:资源如何共享?任务如何隔离?不同厂商的加速器如何统一管理?AI 工作负载如何真正像普通云原生应用一样被调度、治理和运营?
这些问题,正是 HAMi 一直在解决的问题。

01
从“整卡独占”到“共享调度”
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图4

HAMi 的全称是 Heterogeneous AI Computing Middleware,是面向 Kubernetes 的异构 AI 算力虚拟化与调度中间件。
过去,Kubernetes 对 GPU 的管理通常比较粗粒度。一个 Pod 独占一张 GPU,是很多场景下的默认方式。对于大规模训练任务来说,这种方式可以理解;但在推理服务、开发测试、CI 流水线、多租户平台等场景中,整卡独占往往会造成明显浪费。
一张 GPU 可能只使用了一部分显存和算力,却无法再被其他任务使用。资源被占住了,但并没有被充分利用。
HAMi 的价值就在这里。
它通过容器级的显存和算力隔离,让多个任务可以共享同一张 GPU,同时尽量避免彼此影响。对业务来说,不需要大规模改造应用;对平台团队来说,可以把异构算力纳入 Kubernetes 的统一调度体系;对企业来说,则意味着更高的资源利用率和更低的算力成本。
这也是 HAMi 能够进入大量生产环境的根本原因:它解决的不是实验室里的问题,而是企业在 AI 落地过程中每天都会遇到的真实问题。

02
晋升孵化,意味着更高层次的认可
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图5

CNCF 的项目成熟度体系并不是简单的“挂牌”。
Sandbox 更像是一个开放试验场,适合有潜力的新项目进入社区视野;而 Incubating 阶段,则要求项目在技术成熟度、生产采用、安全实践、社区治理和生态集成等方面经受更严格的检验。
HAMi 从 2024 年 8 月加入 CNCF Sandbox,到 2026 年 7 月晋升 Incubating,用了不到两年时间。这说明它不只是有关注度,而是在真实场景中完成了持续验证。
目前,HAMi 已支持 NVIDIA、华为昇腾、寒武纪、海光 DCU、摩尔线程、燧原、昆仑芯、MetaX、AWS Neuron 等多种加速器。对今天的 AI 基础设施来说,异构已经是长期现实。未来不会只有一种芯片,也不会只有一种硬件架构。如何把不同类型的加速器纳入统一资源池,正在成为平台能力的重要分水岭。
HAMi 选择的方向,不是绑定某一种硬件,而是从 Kubernetes 和云原生生态出发,做异构算力的统一抽象。
这也是它能够被 CNCF 生态认可的重要原因。

03
HAMi 的价值,不只是提升利用率
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图6

很多人提到 GPU 共享,第一反应是降本。
这当然是 HAMi 非常直接的价值。通过共享和隔离机制,原本被闲置的显存和算力可以被重新利用,GPU 资源的整体效率也会明显提升。
但 HAMi 的意义不止于此。
在企业级环境里,算力不是买回来就结束了。真正困难的是长期运营:谁在使用?用了多少?是否可以共享?任务之间会不会互相影响?资源如何回收?故障如何定位?不同硬件如何统一调度?
这些问题决定了 AI 基础设施能不能稳定支撑业务。
HAMi 正在做的,是让异构算力具备云原生资源的特征:可以被声明式申请,可以被调度器感知,可以被多个任务安全共享,也可以围绕显存和算力做更细粒度的管理。
换句话说,HAMi 不只是让 GPU “切得更细”,而是让异构算力变得更容易被平台化、工程化和持续运营。
当 AI 应用真正进入生产系统后,企业需要的不会是一堆零散工具,而是一套可以长期演进的基础设施能力。HAMi 正在补齐的,正是 Kubernetes 在异构 AI 算力管理上的关键一环。

04
生产采用,是最有说服力的证明
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图7

一个基础设施项目有没有价值,最终要看它能不能在真实环境中跑起来。
HAMi 这次晋升 CNCF 孵化项目,背后有大量生产实践支撑。金融、汽车、出行、物流、教育、云服务等行业,都已经出现了 HAMi 的落地案例。
这些案例有一个共同点:用户面对的不是单一问题,而是异构算力规模化之后带来的系统性挑战。
多种加速器并存,平台管理复杂度上升;GPU 被不同团队、不同业务共享使用,资源隔离和调度公平性变得更重要;AI 推理、开发测试和批处理任务混合运行,对资源利用率和稳定性提出了更高要求。
HAMi 能够在这些场景中被采用,说明它已经不只是一个技术组件,而是在企业 AI 平台建设中逐渐成为基础能力的一部分。

05
融入生态,决定长期空间
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图8

云原生基础设施从来不是靠单个项目独立完成的。
HAMi 的发展路径,也不是另起炉灶,而是持续融入 Kubernetes 和 CNCF 生态。目前,HAMi-core 已经与 Kubernetes 默认调度器、Volcano、Kueue、Koordinator 以及 NVIDIA KAI Scheduler 等调度生态完成集成。
这说明 HAMi 的价值不仅在于“自己能用”,更在于它可以成为更大调度体系中的关键拼图。
未来,AI 工作负载会越来越复杂。训练、推理、微调、数据处理、在线服务、开发测试会在同一套平台中并行存在。不同任务对显存、算力、吞吐、延迟和优先级的要求都不一样。
这时,异构算力管理不能只靠静态分配,也不能只靠单点工具。它需要和调度器、队列系统、资源治理系统协同工作。
HAMi 进入 Incubating 阶段,意味着它正在从一个 GPU 共享工具,逐步成长为 AI 时代 Kubernetes 异构算力管理的重要基础设施。

06
中文开源项目的全球化样本
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图9

HAMi 还有一个值得关注的意义:它是由中国开发者发起,并在全球云原生社区中持续成长的开源项目。(项目由蜜瓜智能张潇、李孟轩发起,于2021 年 7 月 12 日 首次开源)。
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图10
HAMi 核心维护团队与 CNCF TOC、Red Hat、vLLM 社区分享交流 GPU Sharing
从加入 CNCF Sandbox,到登上 KubeCon + CloudNativeCon 的国际舞台,再到晋升 CNCF Incubating,HAMi 的成长离不开维护者、贡献者、用户企业、云厂商、硬件厂商和全球开发者的共同参与。
这说明中国开源社区不仅可以参与全球生态,也可以在关键基础设施方向上提出问题、贡献方案,并进入全球开发者共同协作的主航道。
开源项目走到最后,拼的不只是代码,更是社区治理、生产验证、生态协同和长期维护能力。HAMi 的这次晋升,正是这些能力被持续验证后的结果。

07
写在最后
从 GPU 共享到异构算力底座:为什么我看好 HAMi?图11

HAMi 晋升 CNCF Incubating,不是终点,而是新的开始。
进入孵化阶段后,HAMi 会面对更多生产场景、更复杂的用户需求和更高的社区治理要求。未来,在硬件支持、资源隔离、调度协同、可观测性、稳定性和开发者体验等方向上,HAMi 仍有很大的成长空间。
AI 基础设施正在从“堆资源”走向“管资源”。算力不再只是硬件采购问题,而是平台能力、调度能力和运营能力的问题。
HAMi 的晋升给出了一个清晰信号:


异构算力管理正在进入云原生主航道。
祝贺 HAMi。
也期待 HAMi 在全球开发者和用户的共同建设下,继续向前。

声明:内容取材于网络,仅代表作者观点,如有内容违规问题,请联系处理。 
GPU
more
【有奖活动】应对千瓦级GPU与兆瓦级机柜的供电挑战
雷军:3倍价格10倍速度!小米万亿参数模型1000 tokens/s狂飙,只需8张GPU
Meta也来卖铲子了!小扎:模型可以慢,GPU必须赚
没用一块GPU!国产超算靠自研CPU干翻美国,重返全球第一
告别GPU“独角戏”!CPU强势杀回C位,国产算力迎来价值重估
F5中国本土创新“出圈”,自研Token负载均衡让异构GPU集群并发提升75%
用8192个RISC-V芯片,打造了一款自制GPU
突破传统旁侧配置,闪迪新专利将NAND闪存“垫”在GPU底下
告别“中转站”:GPU P2P通信,解锁多卡算力的隐形钥匙
腾讯“送钱送订单”!将收获一家国产GPU上市公司
Copyright © 2025 成都区角科技有限公司
蜀ICP备2025143415号-1
  
川公网安备51015602001305号