大模型之家讯 10月15日,红帽公司正式发布了红帽AI 3,这是该公司对企业级人工智能平台的又一次重大升级。该平台整合了红帽AI推理服务器、RHEL AI和OpenShift AI的最新技术成果,旨在简化大规模高性能AI推理的复杂性。通过这一更新,企业可以更便捷地将工作负载从概念验证推进至生产阶段,并提高AI应用相关协作效率。红帽AI 3基于vLLM和llm-d社区项目,结合了红帽的模型优化能力,提供生产级大语言模型服务,强调其可扩展且经济高效的推理能力。
大模型之家讯 10月15日,红帽公司正式发布了红帽AI 3,这是该公司对企业级人工智能平台的又一次重大升级。该平台整合了红帽AI推理服务器、RHEL AI和OpenShift AI的最新技术成果,旨在简化大规模高性能AI推理的复杂性。通过这一更新,企业可以更便捷地将工作负载从概念验证推进至生产阶段,并提高AI应用相关协作效率。红帽AI 3基于vLLM和llm-d社区项目,结合了红帽的模型优化能力,提供生产级大语言模型服务,强调其可扩展且经济高效的推理能力。