首页 > 基础资料 博客日记
OpenAi最简洁的Java流式返回接入方式,没有第三方依赖,只需要使用Spring Boot即可!轻松构建你的带有聊天记忆、画图功能的chatgpt!
2023-07-24 13:00:48基础资料围观511次
Java资料网推荐OpenAi最简洁的Java流式返回接入方式,没有第三方依赖,只需要使用Spring Boot即可!轻松构建你的带有聊天记忆、画图功能的chatgpt!这篇文章给大家,欢迎收藏Java资料网享受知识的乐趣
OpenAi最简洁的Java流式返回接入方式,没有第三方依赖,只需要使用Spring Boot即可!轻松构建你的带有聊天记忆、画图功能的chatgpt!
预览
模型:GPT-3.5-turbo
记忆功能
GPT-3.5-turbo本身不带有记忆功能需要每次把上下文传递过去
int currentToken = (int) (content.length() / TOKEN_CONVERSION_RATE);
List<Message> history = userSessionUtil.getHistory(sessionId, MessageType.TEXT, (int) ((MAX_TOKEN / TOKEN_CONVERSION_RATE) - currentToken));
log.info("history:{}", history);
String historyDialogue = history.stream().map(e -> String.format(e.getUserType().getCode(), e.getMessage())).collect(Collectors.joining());
String prompt = StringUtils.hasLength(historyDialogue) ? String.format("%sQ:%s\n\n", historyDialogue, content) : content;
流式返回
基于WebFlux+SSE实现
接口需要返回 text/event-stream类型
@GetMapping(value = "/completions/stream", produces = MediaType.TEXT_EVENT_STREAM_VALUE)
返回响应式数据
log.info("prompt:{}", prompt);
return Flux.create(emitter -> {
OpenAISubscriber subscriber = new OpenAISubscriber(emitter, sessionId, this, userMessage);
Flux<String> openAiResponse =
openAiWebClient.getChatResponse(sessionId, prompt, null, null, null);
openAiResponse.subscribe(subscriber);
emitter.onDispose(subscriber);
});
帮忙star噢 您的支持就是我的动力
文章来源:https://blog.csdn.net/qq_41389354/article/details/129732571
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:jacktools123@163.com进行投诉反馈,一经查实,立即删除!
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:jacktools123@163.com进行投诉反馈,一经查实,立即删除!
标签: