F5 推出AI网关,管理并保护快速增长的AI流量和应用需求

网络
F5日前宣布推出抢先体验版F5 AI网关(AI Gateway),以简化企业在推动AI部署过程中应用、API和大语言模型(LLMs)间的交互。
F5日前宣布推出抢先体验版F5 AI网关(AI Gateway),以简化企业在推动AI部署过程中应用、API和大语言模型(LLMs)间的交互。这一强大的容器化解决方案能够优化性能、可观测性和保护能力,从而显著降低成本。通过与F5的产品组合深度集成,AI网关为安全和运营团队提供了采用 AI 服务的无缝途径,以大幅提升数据输出质量并带来卓越的用户体验。

根据 F5 发布的《人工智能应用策略现状报告》显示,75% 的企业正在部署AI。与众多现代应用一样,AI服务主要通过 API 进行交付和使用。然而,企业在设计和扩展支持AI的应用和服务时,却面临着更多额外挑战。例如,高效运营需要密切监控GPU计算成本、系统响应速度等日益重要的指标,同时还需应对不断涌现的合规性要求。

F5首席创新官Kunal Anand表示,“LLM正在为用户打造全新的生产力水平,并提升用户体验,但它们同时也需要在推理阶段进行监督、深度检查,并防御新型威胁。通过满足这些新要求并与F5值得信赖的API流量管理解决方案集成,我们将帮助客户在日益复杂的威胁环境中,自信且高效地部署 AI 驱动的应用。”

现实世界中的AI解决方案需要在整个数据生态系统中优化请求、响应和快速交互。F5 AI网关通过观察、优化并保护大量用户和自动化变量,从而降低成本、减少恶意威胁并确保合规性。

F5 AI网关旨在于客户及其应用的 AI 发展中找到最佳契合点。该网关可部署在任何云或数据中心,并原生集成F5 NGINX及BIG-IP平台,从而在传统、多云或边缘部署中充分利用F5领先的应用安全和交付服务。此外,该解决方案的开放可扩展性将允许企业开发和定制由F5 AI网关执行的可编程安全和控制。这些流程可轻松更新并动态应用,以实现对安全策略和合规要求的即时响应。

IDC人工智能和自动化高级总监Shari Lava表示,“AI驱动的应用将在未来几年成为几乎所有企业和组织的基石。F5在其应用堆栈服务中引入AI网关,为客户提供了在构建 AI 应用架构方面更大的灵活性,同时实现更强的保护和模型优化。”

F5 AI网关可为用户带来以下价值:

·通过自动检测和修复提供安全和合规性策略实施,以应对OWASP发布的大语言模型应用程序十大风险;

·利用语义缓存卸载LLM中的重复任务,提升用户体验并降低运营成本;

·简化集成流程,允许开发人员得以专注于构建AI驱动的应用,而不是管理复杂的基础架构;

·优化本地和第三方LLM的负载平衡、流量路由和速率限制,以保持服务可用性并提升性能;

·提供单一 API 接口,供开发人员用于访问他们选择的AI模型。

WorldTech IT首席技术官Austin Geraci表示,“F5 的AI网关是我们AI战略中不可或缺的一部分。借助该项技术,我们的客户能够开发内部和外部的AI应用,这些应用能够处理大量查询,而不降低站点和应用性能。F5 提供的领先应用安全和交付能力,可加速大规模AI体验。通过采用F5 AI网关,仅语义缓存和智能流量路由即可显著降低成本,同时F5服务的统一性也为客户节省了数百小时的集成工作。”


责任编辑:鸢玮 来源: F5
相关推荐

2023-06-19 09:01:17

2015-12-24 15:44:11

2024-02-20 18:39:01

2020-02-12 21:50:44

物联网IIOT物联网平台

2011-07-21 10:34:55

F5ARX

2020-06-18 16:14:31

物联网安全物联网IOT

2021-07-26 13:29:37

布线技术

2011-10-13 15:46:47

F5应用交付

2011-10-13 15:52:55

2020-10-13 10:41:05

云计算

2024-10-28 15:35:24

2018-05-14 16:41:45

2022-03-21 14:27:22

管理市场物联网IOT

2024-08-21 15:54:00

2012-03-13 09:36:37

西雅图移动设备安全

2019-11-08 19:48:25

F5Unity+

2013-11-11 17:17:35

2024-07-24 18:01:39

2014-12-04 16:02:05

F5

2011-06-15 14:39:51

F5应用交付
点赞
收藏

51CTO技术栈公众号