根据 F5 发布的《人工智能应用策略现状报告》显示,75% 的企业正在部署AI。与众多现代应用一样,AI服务主要通过 API 进行交付和使用。然而,企业在设计和扩展支持AI的应用和服务时,却面临着更多额外挑战。例如,高效运营需要密切监控GPU计算成本、系统响应速度等日益重要的指标,同时还需应对不断涌现的合规性要求。
F5首席创新官Kunal Anand表示,“LLM正在为用户打造全新的生产力水平,并提升用户体验,但它们同时也需要在推理阶段进行监督、深度检查,并防御新型威胁。通过满足这些新要求并与F5值得信赖的API流量管理解决方案集成,我们将帮助客户在日益复杂的威胁环境中,自信且高效地部署 AI 驱动的应用。”
现实世界中的AI解决方案需要在整个数据生态系统中优化请求、响应和快速交互。F5 AI网关通过观察、优化并保护大量用户和自动化变量,从而降低成本、减少恶意威胁并确保合规性。
F5 AI网关旨在于客户及其应用的 AI 发展中找到最佳契合点。该网关可部署在任何云或数据中心,并原生集成F5 NGINX及BIG-IP平台,从而在传统、多云或边缘部署中充分利用F5领先的应用安全和交付服务。此外,该解决方案的开放可扩展性将允许企业开发和定制由F5 AI网关执行的可编程安全和控制。这些流程可轻松更新并动态应用,以实现对安全策略和合规要求的即时响应。
IDC人工智能和自动化高级总监Shari Lava表示,“AI驱动的应用将在未来几年成为几乎所有企业和组织的基石。F5在其应用堆栈服务中引入AI网关,为客户提供了在构建 AI 应用架构方面更大的灵活性,同时实现更强的保护和模型优化。”
F5 AI网关可为用户带来以下价值:
·通过自动检测和修复提供安全和合规性策略实施,以应对OWASP发布的大语言模型应用程序十大风险;
·利用语义缓存卸载LLM中的重复任务,提升用户体验并降低运营成本;
·简化集成流程,允许开发人员得以专注于构建AI驱动的应用,而不是管理复杂的基础架构;
·优化本地和第三方LLM的负载平衡、流量路由和速率限制,以保持服务可用性并提升性能;
·提供单一 API 接口,供开发人员用于访问他们选择的AI模型。
WorldTech IT首席技术官Austin Geraci表示,“F5 的AI网关是我们AI战略中不可或缺的一部分。借助该项技术,我们的客户能够开发内部和外部的AI应用,这些应用能够处理大量查询,而不降低站点和应用性能。F5 提供的领先应用安全和交付能力,可加速大规模AI体验。通过采用F5 AI网关,仅语义缓存和智能流量路由即可显著降低成本,同时F5服务的统一性也为客户节省了数百小时的集成工作。”