Red Hat收购Neural Magic,致力于跨混合云中实现高性能AI工作负载
创始人
2024-11-19 22:58:38
0次

开放源码软件解决方案供应商Red Hat近日宣布,已签署收购Neural Magic的最终协议。Neural Magic为提供能加速生成式AI推论工作负载的软件与算法企业,其在推论性能工程的专业技术及对开源的承诺与Red Hat的愿景一致,致力于在跨混合云环境中的任何一处皆能实现高性能AI工作负载,并满足客户特殊的应用场景和数据。

尽管生成式AI的前景在当今科技领域中已占据主导地位,然而构建具成本效益且可靠的LLM服务,企业需要大量的计算资源、能源,以及专业的运营技能,Red Hat就是希望能够借由vLLM的开源创新赋能更多企业更易于使用生成式AI。vLLM是由社交媒体驱动的开源项目,专注于开放模型服务,支持所有主要模型系列、先进的推论加速研究及多种硬件后端。结合Neural Magic在vLLM项目中的领导地位与Red Hat的混合云AI技术产品组合,将为企业提供一条开放的途径,打造能满足独特需求的AI策略,无论数据位于何处皆可实现。

Neural Magic于2018年自麻省理工学院独立,旨在开发高性能的深度学习推论软件。Neural Magic的技术和性能工程专业加上Red Hat的AI技术产品组合,将驱动Red Hat加速实现AI未来愿景。Red Hat为突破大规模企业级AI的挑战,运用开源创新进一步推动AI变革的力量,包括:

Neural Magic凭借在vLLM领域的专业知识,致力于构建企业级推论堆栈,以协助客户于跨混合云环境中优化、部署并扩展LLM工作负载,且能充分掌控基础架构选择、安全原则和模型生命周期。Neural Magic也构建LLM Compressor进行模型优化研究,其为以先进的稀疏性和量划算法优化LLM的集成式涵式库,此外也维护经预先优化、可运用vLLM即时部署的存放库。

Red Hat AI旨在通过强大的技术协助客户降低AI成本及技能门槛,其中包含:

Red Hat将借由Neural Magic在vLLM技术的领导地位,强化支持LLM部署的AI能力,赋能跨混合云环境中随时随处部署,并提供现成、高度优化且开放的推论技术堆栈。

此交易需经监管机构审查和其他惯例成交条件而定。

相关内容

热门资讯

国产大模型下调推理服务价格,南... 近日,国内某大模型企业宣布下调其flash系列模型服务价格,输入缓存命中、输入缓存未命中及输出价格最...
解码青年人AI生活《2026有... 中新网深圳9月5日电(记者索有为)《2026有意思生活方式报告》(下称《报告》)4日在全国首个有意思...
OpenAI 最强 AI 生图... 9月9日消息,OpenAI 9 月 9 日官宣发布 ChatGPT Images 2.5,图像生成延...
探索AI供应链产业化路径京东推... 2026年以来,人工智能应用范围加速拓展,持续从数字空间走向现实生活,广泛融入生产线、仓储厂房、配送...
教育部发文!AI生成内容,教师... 一篇论文,因为AI使用不当,相关高校师生被通报处理。 9月2日,安徽财经大学公布“教师与学生涉嫌学术...
AI识别出近800种可充当乳化... 英国利兹大学食品科学与营养学院和爱丁堡大学科学家携手,开发出一款 人工智能(AI)工具,能从数千万种...
搭上低空经济、AI文旅?两连板... 桂林旅游(000978)回应市场热点。 9月8日,桂林旅游再度涨停,斩获2连板。当天晚间,该公司披露...
硅谷:我们不能被硅谷“AI刹车... 【文/底线思维】 OpenAI首席科学家Jakub Pachocki最近写了一篇文章,题目叫《An ...