一直以来,我都很关注 HAMi 。昨天收到 Jimmy Song 老师的邀请,再谈一下 HAMi 这个项目吧。 首先,抛出我的观点,相对于 K8s=“云原生”事实的代名词,我非常看好 HAMi后续成为 “异构算力”的代名词。因为GPU、NPU、DCU 等异构算力正在从少数团队的专用资源,变成越来越多企业必须长期管理和持续运营的基础设施,HAMi简直是为解决异构算力而生的。2026 年 7 月 2 日,HAMi 正式晋升为 CNCF Incubating(孵化)项目。这对 HAMi 社区来说,是一个很重要的里程碑。它意味着 HAMi 已经从早期探索阶段,进入了更成熟、更稳定,也更受全球云原生生态认可的新阶段。但这件事的意义,不只是“一个开源项目升级了”。HAMi 的成长,正好发生在 AI 基础设施快速重构的关键时期。GPU、NPU、DCU 等异构算力正在越来越多地进入企业生产系统。随之而来的问题也越来越清晰:资源如何共享?任务如何隔离?不同厂商的加速器如何统一管理?AI 工作负载如何真正像普通云原生应用一样被调度、治理和运营?这些问题,正是 HAMi 一直在解决的问题。01从“整卡独占”到“共享调度”HAMi 的全称是 Heterogeneous AI Computing Middleware,是面向 Kubernetes 的异构 AI 算力虚拟化与调度中间件。过去,Kubernetes 对 GPU 的管理通常比较粗粒度。一个 Pod 独占一张 GPU,是很多场景下的默认方式。对于大规模训练任务来说,这种方式可以理解;但在推理服务、开发测试、CI 流水线、多租户平台等场景中,整卡独占往往会造成明显浪费。一张 GPU 可能只使用了一部分显存和算力,却无法再被其他任务使用。资源被占住了,但并没有被充分利用。HAMi 的价值就在这里。它通过容器级的显存和算力隔离,让多个任务可以共享同一张 GPU,同时尽量避免彼此影响。对业务来说,不需要大规模改造应用;对平台团队来说,可以把异构算力纳入 Kubernetes 的统一调度体系;对企业来说,则意味着更高的资源利用率和更低的算力成本。这也是 HAMi 能够进入大量生产环境的根本原因:它解决的不是实验室里的问题,而是企业在 AI 落地过程中每天都会遇到的真实问题。02晋升孵化,意味着更高层次的认可CNCF 的项目成熟度体系并不是简单的“挂牌”。Sandbox 更像是一个开放试验场,适合有潜力的新项目进入社区视野;而 Incubating 阶段,则要求项目在技术成熟度、生产采用、安全实践、社区治理和生态集成等方面经受更严格的检验。HAMi 从 2024 年 8 月加入 CNCF Sandbox,到 2026 年 7 月晋升 Incubating,用了不到两年时间。这说明它不只是有关注度,而是在真实场景中完成了持续验证。目前,HAMi 已支持 NVIDIA、华为昇腾、寒武纪、海光 DCU、摩尔线程、燧原、昆仑芯、MetaX、AWS Neuron 等多种加速器。对今天的 AI 基础设施来说,异构已经是长期现实。未来不会只有一种芯片,也不会只有一种硬件架构。如何把不同类型的加速器纳入统一资源池,正在成为平台能力的重要分水岭。HAMi 选择的方向,不是绑定某一种硬件,而是从 Kubernetes 和云原生生态出发,做异构算力的统一抽象。这也是它能够被 CNCF 生态认可的重要原因。03HAMi 的价值,不只是提升利用率很多人提到 GPU 共享,第一反应是降本。这当然是 HAMi 非常直接的价值。通过共享和隔离机制,原本被闲置的显存和算力可以被重新利用,GPU 资源的整体效率也会明显提升。但 HAMi 的意义不止于此。在企业级环境里,算力不是买回来就结束了。真正困难的是长期运营:谁在使用?用了多少?是否可以共享?任务之间会不会互相影响?资源如何回收?故障如何定位?不同硬件如何统一调度?这些问题决定了 AI 基础设施能不能稳定支撑业务。HAMi 正在做的,是让异构算力具备云原生资源的特征:可以被声明式申请,可以被调度器感知,可以被多个任务安全共享,也可以围绕显存和算力做更细粒度的管理。换句话说,HAMi 不只是让 GPU “切得更细”,而是让异构算力变得更容易被平台化、工程化和持续运营。当 AI 应用真正进入生产系统后,企业需要的不会是一堆零散工具,而是一套可以长期演进的基础设施能力。HAMi 正在补齐的,正是 Kubernetes 在异构 AI 算力管理上的关键一环。04生产采用,是最有说服力的证明一个基础设施项目有没有价值,最终要看它能不能在真实环境中跑起来。HAMi 这次晋升 CNCF 孵化项目,背后有大量生产实践支撑。金融、汽车、出行、物流、教育、云服务等行业,都已经出现了 HAMi 的落地案例。这些案例有一个共同点:用户面对的不是单一问题,而是异构算力规模化之后带来的系统性挑战。多种加速器并存,平台管理复杂度上升;GPU 被不同团队、不同业务共享使用,资源隔离和调度公平性变得更重要;AI 推理、开发测试和批处理任务混合运行,对资源利用率和稳定性提出了更高要求。HAMi 能够在这些场景中被采用,说明它已经不只是一个技术组件,而是在企业 AI 平台建设中逐渐成为基础能力的一部分。05融入生态,决定长期空间云原生基础设施从来不是靠单个项目独立完成的。HAMi 的发展路径,也不是另起炉灶,而是持续融入 Kubernetes 和 CNCF 生态。目前,HAMi-core 已经与 Kubernetes 默认调度器、Volcano、Kueue、Koordinator 以及 NVIDIA KAI Scheduler 等调度生态完成集成。这说明 HAMi 的价值不仅在于“自己能用”,更在于它可以成为更大调度体系中的关键拼图。未来,AI 工作负载会越来越复杂。训练、推理、微调、数据处理、在线服务、开发测试会在同一套平台中并行存在。不同任务对显存、算力、吞吐、延迟和优先级的要求都不一样。这时,异构算力管理不能只靠静态分配,也不能只靠单点工具。它需要和调度器、队列系统、资源治理系统协同工作。HAMi 进入 Incubating 阶段,意味着它正在从一个 GPU 共享工具,逐步成长为 AI 时代 Kubernetes 异构算力管理的重要基础设施。06中文开源项目的全球化样本HAMi 还有一个值得关注的意义:它是由中国开发者发起,并在全球云原生社区中持续成长的开源项目。(项目由蜜瓜智能的张潇、李孟轩发起,于2021 年 7 月 12 日 首次开源)。HAMi 核心维护团队与 CNCF TOC、Red Hat、vLLM 社区分享交流 GPU Sharing从加入 CNCF Sandbox,到登上 KubeCon + CloudNativeCon 的国际舞台,再到晋升 CNCF Incubating,HAMi 的成长离不开维护者、贡献者、用户企业、云厂商、硬件厂商和全球开发者的共同参与。这说明中国开源社区不仅可以参与全球生态,也可以在关键基础设施方向上提出问题、贡献方案,并进入全球开发者共同协作的主航道。开源项目走到最后,拼的不只是代码,更是社区治理、生产验证、生态协同和长期维护能力。HAMi 的这次晋升,正是这些能力被持续验证后的结果。07写在最后HAMi 晋升 CNCF Incubating,不是终点,而是新的开始。进入孵化阶段后,HAMi 会面对更多生产场景、更复杂的用户需求和更高的社区治理要求。未来,在硬件支持、资源隔离、调度协同、可观测性、稳定性和开发者体验等方向上,HAMi 仍有很大的成长空间。AI 基础设施正在从“堆资源”走向“管资源”。算力不再只是硬件采购问题,而是平台能力、调度能力和运营能力的问题。HAMi 的晋升给出了一个清晰信号:异构算力管理正在进入云原生主航道。祝贺 HAMi。也期待 HAMi 在全球开发者和用户的共同建设下,继续向前。