企业站

红帽OpenShift AI将集成NVIDIA NIM

Asgardia 原创 2024-05-13 10:12:22
企业站_资讯眼

近日,红帽公司宣布即将在红帽OpenShift AI上集成NVIDIA NIM微服务,从而为数十种AI模型提供优化推理,这些模型由一致的开源AI/ML混合云平台支持。企业将能够使用红帽OpenShift AI与NVIDIA NIM在一个可信赖的MLOps平台上开发新一代人工智能驱动的应用程序。

Nvidia NIM是Nvidia在前不久GTC会议上宣布推出的软件平台,也是 NVIDIA AI Enterprise 的一部分,旨在简化定制和预先训练的 AI 模型在生产环境中的部署。NIM 继承了 Nvidia 围绕推理和优化模型所做的软件工作,并通过将给定模型与优化的推理引擎相结合,然后将其打包到容器中,使其作为微服务进行访问,从而使其易于访问。

作为此次最新合作的一部分,NVIDIA将使NIM与KServe实现互操作性,KServe是一个基于Kubernetes的开源项目,用于高度可扩展的人工智能用例,也是红帽OpenShift人工智能的核心上游贡献者。这将有助于在红帽OpenShift AI的未来迭代中推动NVIDIA NIM微服务的持续互操作性。

通过使用红帽OpenShift AI和NVIDIA NIM,企业可以受益于:

*简化集成路径,将NVIDIA NIM部署到与其他AI部署一起的通用工作流中,以实现更高的一致性和更轻松的管理。

* NVIDIA NIM部署的集成扩展和监控,与混合云环境中的其他AI模型部署协调。

*企业级的安全性、支持和稳定性,确保在AI上运行业务的企业从原型顺利过渡到生产。

NVIDIA NIM微服务旨在加速GenAI在企业中的部署。NIM支持广泛的人工智能模型,包括开源社区模型、NVIDIA AI基金会模型和自定义模型,通过行业标准的应用程序编程接口(api)在本地或云中提供无缝的、可扩展的人工智能推理。

点击展开全文
打开APP,阅读体验更佳

网友评论

聚超值推荐

更多优惠

相关推荐

AMD准备推出Zen 5 处理器 原创 企业站 资讯
AMD准备推出Zen 5 处理器
CentOS停服后,有哪些国产OS适合接盘呢? 原创 企业站 资讯
CentOS停服后,有哪些国产OS适合接盘呢?
中国公有云服务市场进入战略调整期 原创 企业站 资讯
中国公有云服务市场进入战略调整期
工信部:一季度软件业利润同比增13.8% 原创 企业站 资讯
工信部:一季度软件业利润同比增13.8%
VMware Private AI方案详述六:VMware 内部Private AI实践分享 原创 企业站 资讯
VMware Private AI方案详述六:VMware 内部Private AI实践分享
专访迪思传媒江忠锋:用AI真正为5000万中小微企业营销赋能 原创 企业站 资讯
专访迪思传媒江忠锋:用AI真正为5000万中小微企业营销赋能
Synergy:云计算三巨头一季度增长强劲 原创 企业站 资讯
Synergy:云计算三巨头一季度增长强劲
PCI-SIG公布CopprLink线缆规范 原创 企业站 资讯
PCI-SIG公布CopprLink线缆规范
Eviden推出人工智能计算产品组合 原创 企业站 资讯
Eviden推出人工智能计算产品组合
NVIDIA Omniverse正加速构建AI助力的数字孪生世界 原创 企业站 资讯
NVIDIA Omniverse正加速构建AI助力的数字孪生世界
相关产品
取消