README.md 12.1 KB
Newer Older
小傅哥's avatar
小傅哥 已提交
1
# 智谱Ai大模型开放SDK - By 小傅哥版本
小傅哥's avatar
小傅哥 已提交
2

小傅哥's avatar
小傅哥 已提交
3
为了让研发伙伴更快,更方便的接入使用智谱Ai大模型。从而开发的 chatglm-sdk-java 也欢迎👏🏻大家基于智谱API接口补充需要的功能。
小傅哥's avatar
小傅哥 已提交
4

小傅哥's avatar
小傅哥 已提交
5 6 7 8 9
此SDK设计,以 Session 会话模型,提供工厂🏭创建服务。代码非常清晰,易于扩展、易于维护。你的PR/ISSUE贡献💐会让AI更加璀璨,[感谢智谱AI团队](https://www.zhipuai.cn/)

---

>**作者**:小傅哥 - 个人博客 [**bugstack.cn**](https://bugstack.cn/),互联网大厂架构师,《重学Java设计模式》、《手写MyBatis:渐进式源码实践》图书作者。`欢迎百度搜索:小傅哥bugstack`
小傅哥's avatar
小傅哥 已提交
10

小傅哥's avatar
小傅哥 已提交
11 12
## 👣目录

小傅哥's avatar
小傅哥 已提交
13 14 15 16 17
1. 组件配置
2. 功能测试
   1. 代码执行 - `使用:代码的方式主要用于程序接入`
   2. 脚本测试 - `测试:生成Token,直接通过HTTP访问Ai服务`
3. 程序接入
小傅哥's avatar
小傅哥 已提交
18

小傅哥's avatar
小傅哥 已提交
19
## 1. 组件配置
小傅哥's avatar
小傅哥 已提交
20 21 22

- 申请ApiKey:[https://open.bigmodel.cn/usercenter/apikeys](https://open.bigmodel.cn/usercenter/apikeys) - 注册申请开通,即可获得 ApiKey
- 运行环境:JDK 1.8+
小傅哥's avatar
小傅哥 已提交
23
- maven pom - `已发布到Maven仓库`
小傅哥's avatar
小傅哥 已提交
24 25 26 27 28

```pom
<dependency>
    <groupId>cn.bugstack</groupId>
    <artifactId>chatglm-sdk-java</artifactId>
小傅哥's avatar
小傅哥 已提交
29
    <version>1.1</version>
小傅哥's avatar
小傅哥 已提交
30 31 32
</dependency>
```

小傅哥's avatar
小傅哥 已提交
33 34 35 36
- 源码(Github):[https://github.com/fuzhengwei/chatglm-sdk-java](https://github.com/fuzhengwei/chatglm-sdk-java)
- 源码(Gitee):[https://gitee.com/fustack/chatglm-sdk-java](https://gitee.com/fustack/chatglm-sdk-java)
- 源码(Gitcode):[https://gitcode.net/KnowledgePlanet/road-map/chatglm-sdk-java](https://gitcode.net/KnowledgePlanet/road-map/chatglm-sdk-java)

小傅哥's avatar
小傅哥 已提交
37 38 39
## 2. 功能测试

### 2.1 代码执行
小傅哥's avatar
小傅哥 已提交
40 41

```java
小傅哥 已提交
42 43 44 45 46 47
/**
 * @author 小傅哥,微信:fustack
 * @description 在官网申请 ApiSecretKey <a href="https://open.bigmodel.cn/usercenter/apikeys">ApiSecretKey</a>
 * @github https://github.com/fuzhengwei
 * @Copyright 公众号:bugstack虫洞栈 | 博客:https://bugstack.cn - 沉淀、分享、成长,让自己和他人都能有所收获!
 */
小傅哥's avatar
小傅哥 已提交
48 49 50 51 52 53 54 55 56 57
@Slf4j
public class ApiTest {

    private OpenAiSession openAiSession;

    @Before
    public void test_OpenAiSessionFactory() {
        // 1. 配置文件
        Configuration configuration = new Configuration();
        configuration.setApiHost("https://open.bigmodel.cn/");
小傅哥 已提交
58 59
        configuration.setApiSecretKey("d570f7c5d289cdac2abdfdc562e39f3f.trqz1dH8ZK6ED7Pg");
        configuration.setLevel(HttpLoggingInterceptor.Level.BODY);
小傅哥's avatar
小傅哥 已提交
60 61 62 63 64 65 66
        // 2. 会话工厂
        OpenAiSessionFactory factory = new DefaultOpenAiSessionFactory(configuration);
        // 3. 开启会话
        this.openAiSession = factory.openSession();
    }

    /**
小傅哥 已提交
67
     * 流式对话 & 关联上下文
小傅哥's avatar
小傅哥 已提交
68 69 70 71 72
     */
    @Test
    public void test_completions() throws JsonProcessingException, InterruptedException {
        // 入参;模型、请求信息
        ChatCompletionRequest request = new ChatCompletionRequest();
小傅哥 已提交
73 74
        request.setModel(Model.CHATGLM_TURBO); // chatGLM_6b_SSE、chatglm_lite、chatglm_lite_32k、chatglm_std、chatglm_pro
        request.setIncremental(false);
小傅哥's avatar
小傅哥 已提交
75 76 77 78 79 80
        request.setPrompt(new ArrayList<ChatCompletionRequest.Prompt>() {
            private static final long serialVersionUID = -7988151926241837899L;

            {
                add(ChatCompletionRequest.Prompt.builder()
                        .role(Role.user.getCode())
小傅哥 已提交
81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102
                        .content("1+2")
                        .build());

                add(ChatCompletionRequest.Prompt.builder()
                        .role(Role.user.getCode())
                        .content("Okay")
                        .build());

                /* system 和 user 为一组出现。如果有参数类型为 system 则 system + user 一组一起传递。*/
                add(ChatCompletionRequest.Prompt.builder()
                        .role(Role.system.getCode())
                        .content("1+1=2")
                        .build());

                add(ChatCompletionRequest.Prompt.builder()
                        .role(Role.user.getCode())
                        .content("Okay")
                        .build());

                add(ChatCompletionRequest.Prompt.builder()
                        .role(Role.user.getCode())
                        .content("1+2")
小傅哥's avatar
小傅哥 已提交
103
                        .build());
小傅哥 已提交
104

小傅哥's avatar
小傅哥 已提交
105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124
            }
        });

        // 请求
        openAiSession.completions(request, new EventSourceListener() {
            @Override
            public void onEvent(EventSource eventSource, @Nullable String id, @Nullable String type, String data) {
                ChatCompletionResponse response = JSON.parseObject(data, ChatCompletionResponse.class);
                log.info("测试结果 onEvent:{}", response.getData());
                // type 消息类型,add 增量,finish 结束,error 错误,interrupted 中断
                if (EventType.finish.getCode().equals(type)) {
                    ChatCompletionResponse.Meta meta = JSON.parseObject(response.getMeta(), ChatCompletionResponse.Meta.class);
                    log.info("[输出结束] Tokens {}", JSON.toJSONString(meta));
                }
            }

            @Override
            public void onClosed(EventSource eventSource) {
                log.info("对话完成");
            }
小傅哥 已提交
125

小傅哥's avatar
小傅哥 已提交
126 127 128 129 130
        });

        // 等待
        new CountDownLatch(1).await();
    }
小傅哥 已提交
131 132

    /**
小傅哥 已提交
133
     * 同步请求
小傅哥 已提交
134 135 136 137 138 139 140 141 142 143 144 145
     */
    @Test
    public void test_completions_future() throws ExecutionException, InterruptedException {
        // 入参;模型、请求信息
        ChatCompletionRequest request = new ChatCompletionRequest();
        request.setModel(Model.CHATGLM_TURBO); // chatGLM_6b_SSE、chatglm_lite、chatglm_lite_32k、chatglm_std、chatglm_pro
        request.setPrompt(new ArrayList<ChatCompletionRequest.Prompt>() {
            private static final long serialVersionUID = -7988151926241837899L;

            {
                add(ChatCompletionRequest.Prompt.builder()
                        .role(Role.user.getCode())
小傅哥 已提交
146
                        .content("1+1")
小傅哥 已提交
147 148 149 150 151 152 153 154 155 156 157
                        .build());
            }
        });

        CompletableFuture<String> future = openAiSession.completions(request);
        String response = future.get();

        log.info("测试结果:{}", response);
    }

    /**
小傅哥 已提交
158
     * 同步请求
小傅哥 已提交
159 160 161 162 163 164 165 166 167 168 169 170
     */
    @Test
    public void test_completions_sync() throws IOException {
        // 入参;模型、请求信息
        ChatCompletionRequest request = new ChatCompletionRequest();
        request.setModel(Model.CHATGLM_TURBO); // chatGLM_6b_SSE、chatglm_lite、chatglm_lite_32k、chatglm_std、chatglm_pro
        request.setPrompt(new ArrayList<ChatCompletionRequest.Prompt>() {
            private static final long serialVersionUID = -7988151926241837899L;

            {
                add(ChatCompletionRequest.Prompt.builder()
                        .role(Role.user.getCode())
小傅哥 已提交
171
                        .content("1+1")
小傅哥 已提交
172 173 174 175 176 177 178 179
                        .build());
            }
        });

        ChatCompletionSyncResponse response = openAiSession.completionsSync(request);

        log.info("测试结果:{}", JSON.toJSONString(response));
    }
小傅哥 已提交
180

小傅哥's avatar
小傅哥 已提交
181 182 183 184 185
}
```

- 这是一个单元测试类,也是最常使用的流式对话模式。

小傅哥's avatar
小傅哥 已提交
186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 213 214 215 216 217 218 219 220 221 222 223 224 225 226 227 228
### 2.2 脚本测试

```java
@Test
public void test_curl() {
    // 1. 配置文件
    Configuration configuration = new Configuration();
    configuration.setApiHost("https://open.bigmodel.cn/");
    configuration.setApiSecretKey("4e087e4135306ef4a676f0cce3cee560.sgP2D****");
    // 2. 获取Token
    String token = BearerTokenUtils.getToken(configuration.getApiKey(), configuration.getApiSecret());
    log.info("1. 在智谱Ai官网,申请 ApiSeretKey 配置到此测试类中,替换 setApiSecretKey 值。 https://open.bigmodel.cn/usercenter/apikeys");
    log.info("2. 运行 test_curl 获取 token:{}", token);
    log.info("3. 将获得的 token 值,复制到 curl.sh 中,填写到 Authorization: Bearer 后面");
    log.info("4. 执行完步骤3以后,可以复制直接运行 curl.sh 文件,或者复制 curl.sh 文件内容到控制台/终端/ApiPost中运行");
}
```

```java
curl -X POST \
        -H "Authorization: Bearer <把获得的Token填写这,并去掉两个尖括号>" \
        -H "Content-Type: application/json" \
        -H "User-Agent: Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; DigExt)" \
        -H "Accept: text/event-stream" \
        -d '{
        "top_p": 0.7,
        "sseFormat": "data",
        "temperature": 0.9,
        "incremental": true,
        "request_id": "xfg-1696992276607",
        "prompt": [
        {
        "role": "user",
        "content": "写个java冒泡排序"
        }
        ]
        }' \
  http://open.bigmodel.cn/api/paas/v3/model-api/chatglm_lite/sse-invoke
```

- 运行后你会获得一个 Token 信息,之后在 curl.sh 中替换  Authorization: Bearer 后面的值。就可以执行测试了。

## 3. 程序接入
小傅哥's avatar
小傅哥 已提交
229 230 231 232 233 234 235 236 237

SpringBoot 配置类

```java
@Configuration
@EnableConfigurationProperties(ChatGLMSDKConfigProperties.class)
public class ChatGLMSDKConfig {

    @Bean
小傅哥's avatar
小傅哥 已提交
238
    @ConditionalOnProperty(value = "chatglm.sdk.config.enabled", havingValue = "true", matchIfMissing = false)
小傅哥's avatar
小傅哥 已提交
239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256
    public OpenAiSession openAiSession(ChatGLMSDKConfigProperties properties) {
        // 1. 配置文件
        cn.bugstack.chatglm.session.Configuration configuration = new cn.bugstack.chatglm.session.Configuration();
        configuration.setApiHost(properties.getApiHost());
        configuration.setApiSecretKey(properties.getApiSecretKey());

        // 2. 会话工厂
        OpenAiSessionFactory factory = new DefaultOpenAiSessionFactory(configuration);

        // 3. 开启会话
        return factory.openSession();
    }

}

@Data
@ConfigurationProperties(prefix = "chatglm.sdk.config", ignoreInvalidFields = true)
public class ChatGLMSDKConfigProperties {
小傅哥's avatar
小傅哥 已提交
257 258 259

    /** 状态;open = 开启、close 关闭 */
    private boolean enable;
小傅哥's avatar
小傅哥 已提交
260 261 262 263 264 265 266 267
    /** 转发地址 */
    private String apiHost;
    /** 可以申请 sk-*** */
    private String apiSecretKey;

}
```

小傅哥's avatar
小傅哥 已提交
268 269 270 271 272 273 274
```java
@Autowired(required = false)
private OpenAiSession openAiSession;
```

- 注意:如果你在服务中配置了关闭启动 ChatGLM SDK 那么注入 openAiSession 为 null

小傅哥's avatar
小傅哥 已提交
275 276 277 278
yml 配置

```pom
# ChatGLM SDK Config
小傅哥's avatar
小傅哥 已提交
279
chatglm:
小傅哥's avatar
小傅哥 已提交
280 281
  sdk:
    config:
小傅哥's avatar
小傅哥 已提交
282 283
      # 状态;true = 开启、false 关闭
      enabled: false
小傅哥's avatar
小傅哥 已提交
284 285 286
      # 官网地址 
      api-host: https://open.bigmodel.cn/
      # 官网申请 https://open.bigmodel.cn/usercenter/apikeys
小傅哥's avatar
小傅哥 已提交
287
      api-secret-key: 4e087e4135306ef4a676f0cce3cee560.sgP2DUs*****
小傅哥's avatar
小傅哥 已提交
288 289 290 291 292 293 294 295 296 297
```

---

- 👨‍💻 成长:[关于我,从小白到架构师的成长经历](https://www.bilibili.com/video/BV1FF41137q5)
- 🚌 作品:[`CodeGuide | 程序员编码指南`](https://github.com/fuzhengwei/CodeGuide) | [`RoadMap 编程路书`](https://github.com/fuzhengwei/RoadMap) | [`Java 数据结构和算法`](https://github.com/fuzhengwei/java-algorithms) | [`IM 仿微信`](https://github.com/fuzhengwei/NaiveChat) | [`Java 面经手册`](https://github.com/fuzhengwei/interview) | [`IntelliJ IDEA 插件开发`](https://github.com/fuzhengwei/guide-idea-plugin) | [`Lottery 抽奖系统 - 基于领域驱动设计的四层架构实践`](https://github.com/fuzhengwei/Lottery) | [`API网关`](https://github.com/fuzhengwei/api-gateway) | [`手写MyBatis`](https://github.com/fuzhengwei/small-mybatis) | [`重学Java设计模式`](https://github.com/fuzhengwei/itstack-demo-design) | [`Netty 实战案例`](https://github.com/fuzhengwei/itstack-demo-netty) | [`字节码编程`](https://github.com/fuzhengwei/itstack-demo-bytecode) | [`ChatGPT AI 问答助手`](https://github.com/fuzhengwei/chatbot-api) | [更多搜索...](https://github.com/fuzhengwei?tab=repositories)
- 🌱 干货:[公众号『 bugstack虫洞栈 』](https://bugstack.cn/images/personal/qrcode.png)
- 📝 博客:[bugstack.cn](https://bugstack.cn/) - 足够硬核,内容老狠了!
- 📺 视频:[B站 小傅哥の码场](https://space.bilibili.com/15637440)
- 💌 微信:[fustack](https://bugstack.cn/images/personal/fustack.png) - 备注来意
小傅哥 已提交
298
- 🐾 我的编程知识星球:[实战生产级项目、手写框架级源码,可以向我 1对1 提问,解答技术/职场/规划问题](https://bugstack.cn/md/zsxq/introduce.html)