流式传输服务器发送的事件

本页面适用于 ApigeeApigee Hybrid

查看 Apigee Edge 文档。

Apigee 支持从服务器发送的事件 (SSE) 端点向客户端实时进行连续响应流式传输。Apigee SSE 功能非常适合处理通过将响应流式传输回客户端来以最高效方式运行的大语言模型 (LLM) API。SSE 流式传输可缩短延迟时间,并且客户端可以在 LLM 生成响应数据后立即接收。此功能支持使用在实时环境中运行的 AI 代理,例如客户服务机器人或工作流编排程序。

如需将 SSE 与 Apigee 搭配使用,只需将 API 代理指向启用了 SSE 的目标端点或代理端点即可。为了更精细地控制 SSE 响应,Apigee 提供了一个名为 EventFlow 的特殊端点流。在 EventFlow 的上下文中,您可以添加一组有限的政策来对 SSE 响应执行操作,例如过滤、修改或处理错误。如需详细了解代理流,请参阅使用流控制 API 代理

为 SSE 创建 API 代理

Apigee 界面提供了一个用于创建新代理的模板,其中包含 EventFlow