SSE介绍(实现流式响应)

2024-05-09 19:28
文章标签 实现 介绍 响应 sse 流式

本文主要是介绍SSE介绍(实现流式响应),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

写在前面

本文一起来看下SSE相关内容。

1:SSE是什么

全称,server-send events,基于http协议,一次http请求,server端可以分批推送数据, 不同于websocket的全双工通信,SSM单向通信,一般应用于需要返回的内容较多场景中,比如大模型问答场景,答案可能比较长,就可以使用SSM来实现流式的响应。

2:例子

  • pom
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd"><modelVersion>4.0.0</modelVersion><groupId>org.example</groupId><artifactId>sse-test</artifactId><version>1.0-SNAPSHOT</version><properties><maven.compiler.source>8</maven.compiler.source><maven.compiler.target>8</maven.compiler.target></properties><parent><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-parent</artifactId><version>2.6.0</version><relativePath/> <!-- lookup parent from repository --></parent><dependencies><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency><dependency><groupId>com.squareup.okhttp3</groupId><artifactId>okhttp</artifactId>
<!--            <version>4.10.0</version>--><version>3.14.9</version></dependency><dependency><groupId>com.squareup.okhttp3</groupId><artifactId>okhttp-sse</artifactId>
<!--            <version>4.10.0</version>--><version>3.14.9</version></dependency><dependency><groupId>junit</groupId><artifactId>junit</artifactId><version>4.13.2</version><scope>test</scope></dependency></dependencies></project>
  • SSM server
@RestController
@RequestMapping("/sse")
public class SseController {@RequestMapping("/emitter")public SseEmitter sse(@RequestBody String inputParameter, HttpServletResponse response) {response.setContentType("text/event-stream");response.setCharacterEncoding("UTF-8");SseEmitter emitter = new SseEmitter();// Simulate asynchronous data retrieval from the databasenew Thread(() -> {try {// Query the database based on the input parameter and send data in batchesfor (int i = 0; i < 10; i++) {String data = "Data batch " + i + " for parameter: " + inputParameter;emitter.send(data);Thread.sleep(1000); // Simulate delay between batches}emitter.complete(); // Complete the SSE connection} catch (Exception e) {emitter.completeWithError(e); // Handle errors}}).start();return emitter;}
}
  • SSM client
package sse;import okhttp3.*;
import okhttp3.sse.EventSource;
import okhttp3.sse.EventSourceListener;
import okhttp3.sse.EventSources;
import org.junit.Test;import java.util.Date;
import java.util.HashMap;
import java.util.Map;
import java.util.concurrent.CountDownLatch;
import java.util.concurrent.TimeUnit;public class TTT {CountDownLatch c = new CountDownLatch(1);@Testpublic void aaa() throws InterruptedException {String json = "{\"inputParameter\": \"1234\"}";stream("http://localhost:8080/sse/emitter", new HashMap<>(), json, new EventSourceListener() {/*@Overridepublic void onClosed(@NotNull EventSource eventSource) {System.out.println("closed");}@Overridepublic void onOpen(@NotNull EventSource eventSource, @NotNull Response response) {System.out.println("open");}@Overridepublic void onEvent(@NotNull EventSource eventSource, @Nullable String id, @Nullable String type, @NotNull String data) {System.out.println(data);}*/@Overridepublic void onClosed(EventSource eventSource) {System.out.println("closed");}@Overridepublic void onOpen(EventSource eventSource, Response response) {System.out.println("open");}@Overridepublic void onEvent(EventSource eventSource, String id, String type, String data) {System.out.println("receive data: [ " + data + " ], time:" + new Date().getTime() / 1000);}});c.await();}public static final MediaType MEDIA_TYPE_JSON = MediaType.parse("application/json; charset=utf-8");public final static int MAX_IDLE_CONNECTIONS = 20;public final static long KEEP_ALIVE_DURATION = 30L;public final static int CONNECT_TIME_OUT = 6;public final static int WRITE_TIME_OUT = 10;public final static int READ_TIME_OUT = 40;private final static OkHttpClient HTTP_CLIENT = new OkHttpClient.Builder().connectTimeout(CONNECT_TIME_OUT, TimeUnit.SECONDS).writeTimeout(WRITE_TIME_OUT, TimeUnit.SECONDS).readTimeout(READ_TIME_OUT, TimeUnit.SECONDS).connectionPool(new ConnectionPool(MAX_IDLE_CONNECTIONS, KEEP_ALIVE_DURATION, TimeUnit.MINUTES)).build();public static boolean stream(String url, Map<String, String> headers, String json, EventSourceListener eventSourceListener) {try {RequestBody body = RequestBody.create(MEDIA_TYPE_JSON, json);Request.Builder builder = new Request.Builder();
//            buildHeader(builder, headers);Request request = builder.url(url).post(body).build();EventSource.Factory factory = EventSources.createFactory(HTTP_CLIENT);//创建事件
//            log.info("http stream请求,url: {},参数: {}", url, json);factory.newEventSource(request, eventSourceListener);return true;} catch (Exception e) {
//            log.error("http stream请求,url: {} 失败 ,参数: {}", url, json, e);}return false;}}
  • 测试
    启动server后运行client:
    在这里插入图片描述
    可以看到一点一点往外蹦。

写在后面

参考文章列表

springboot整合sse 。

springboot搭建流式响应服务,SSE服务端实现 。

这篇关于SSE介绍(实现流式响应)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/974288

相关文章

Go语言开发实现查询IP信息的MCP服务器

《Go语言开发实现查询IP信息的MCP服务器》随着MCP的快速普及和广泛应用,MCP服务器也层出不穷,本文将详细介绍如何在Go语言中使用go-mcp库来开发一个查询IP信息的MCP... 目录前言mcp-ip-geo 服务器目录结构说明查询 IP 信息功能实现工具实现工具管理查询单个 IP 信息工具的实现服

SpringBoot基于配置实现短信服务策略的动态切换

《SpringBoot基于配置实现短信服务策略的动态切换》这篇文章主要为大家详细介绍了SpringBoot在接入多个短信服务商(如阿里云、腾讯云、华为云)后,如何根据配置或环境切换使用不同的服务商,需... 目录目标功能示例配置(application.yml)配置类绑定短信发送策略接口示例:阿里云 & 腾

Spring Boot 整合 SSE的高级实践(Server-Sent Events)

《SpringBoot整合SSE的高级实践(Server-SentEvents)》SSE(Server-SentEvents)是一种基于HTTP协议的单向通信机制,允许服务器向浏览器持续发送实... 目录1、简述2、Spring Boot 中的SSE实现2.1 添加依赖2.2 实现后端接口2.3 配置超时时

python实现svg图片转换为png和gif

《python实现svg图片转换为png和gif》这篇文章主要为大家详细介绍了python如何实现将svg图片格式转换为png和gif,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录python实现svg图片转换为png和gifpython实现图片格式之间的相互转换延展:基于Py

Python利用ElementTree实现快速解析XML文件

《Python利用ElementTree实现快速解析XML文件》ElementTree是Python标准库的一部分,而且是Python标准库中用于解析和操作XML数据的模块,下面小编就来和大家详细讲讲... 目录一、XML文件解析到底有多重要二、ElementTree快速入门1. 加载XML的两种方式2.

Java的栈与队列实现代码解析

《Java的栈与队列实现代码解析》栈是常见的线性数据结构,栈的特点是以先进后出的形式,后进先出,先进后出,分为栈底和栈顶,栈应用于内存的分配,表达式求值,存储临时的数据和方法的调用等,本文给大家介绍J... 目录栈的概念(Stack)栈的实现代码队列(Queue)模拟实现队列(双链表实现)循环队列(循环数组

redis过期key的删除策略介绍

《redis过期key的删除策略介绍》:本文主要介绍redis过期key的删除策略,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录第一种策略:被动删除第二种策略:定期删除第三种策略:强制删除关于big key的清理UNLINK命令FLUSHALL/FLUSHDB命

C++如何通过Qt反射机制实现数据类序列化

《C++如何通过Qt反射机制实现数据类序列化》在C++工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作,所以本文就来聊聊C++如何通过Qt反射机制实现数据类序列化吧... 目录设计预期设计思路代码实现使用方法在 C++ 工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作。由于数据类

Python实现图片分割的多种方法总结

《Python实现图片分割的多种方法总结》图片分割是图像处理中的一个重要任务,它的目标是将图像划分为多个区域或者对象,本文为大家整理了一些常用的分割方法,大家可以根据需求自行选择... 目录1. 基于传统图像处理的分割方法(1) 使用固定阈值分割图片(2) 自适应阈值分割(3) 使用图像边缘检测分割(4)

Android实现在线预览office文档的示例详解

《Android实现在线预览office文档的示例详解》在移动端展示在线Office文档(如Word、Excel、PPT)是一项常见需求,这篇文章为大家重点介绍了两种方案的实现方法,希望对大家有一定的... 目录一、项目概述二、相关技术知识三、实现思路3.1 方案一:WebView + Office Onl