此版本仍在开发中,尚未被视为稳定版本。最新的快照版本请使用 Spring AI 1.0.0-SNAPSHOT! |
watsonx.ai 嵌入
使用 Watsonx.ai 您可以运行各种大型语言模型 (LLM) 并从中生成嵌入。
Spring AI 支持使用 Watsonx.ai 文本嵌入。WatsonxAiEmbeddingModel
嵌入是浮点数的向量(列表)。 两个向量之间的距离衡量它们的相关性。 小距离表示高相关性,大距离表示低相关性。
先决条件
您首先需要拥有 watsonx.ai 的 SaaS 实例(以及一个 IBM Cloud 帐户)。
请参阅免费试用以免费试用 watsonx.ai
更多信息可以在这里找到 |
添加存储库和 BOM
Spring AI 工件发布在 Spring Milestone 和 Snapshot 存储库中。请参阅 Repositories 部分,将这些存储库添加到您的构建系统中。
为了帮助进行依赖项管理,Spring AI 提供了一个 BOM(物料清单),以确保在整个项目中使用一致的 Spring AI 版本。请参阅依赖项管理部分,将 Spring AI BOM 添加到您的构建系统中。
自动配置
Spring AI 为 Watsonx.ai Embedding 模型提供 Spring Boot 自动配置。
要启用它,请将以下依赖项添加到您的 Maven 文件中:pom.xml
<dependency>
<groupId>org.springframework.ai</groupId>
<artifactId>spring-ai-watsonx-ai-spring-boot-starter</artifactId>
</dependency>
或您的 Gradle 构建文件。build.gradle
dependencies {
implementation 'org.springframework.ai:spring-ai-watsonx-ai-spring-boot-starter'
}
请参阅 Dependency Management 部分,将 Spring AI BOM 添加到您的构建文件中。 |
这些属性用于配置用于所有嵌入请求的默认选项。spring.ai.watsonx.embedding.options.*
嵌入属性
前缀用作允许您连接到 watsonx.ai 的属性前缀。spring.ai.watsonx.ai
财产 | 描述 | 违约 |
---|---|---|
spring.ai.watsonx.ai.base-url |
要连接到的 URL |
|
spring.ai.watsonx.ai.embedding-endpoint |
文本端点 |
ml/v1/text/embeddings?版本=2023-05-29 |
spring.ai.watsonx.ai.project-id |
项目 ID |
- |
spring.ai.watsonx.ai.iam-token |
IBM Cloud 帐户 IAM 令牌 |
- |
prefix 是配置 Watsonx.ai 实现的属性 prefix。spring.ai.watsonx.embedding.options
EmbeddingModel
财产 | 描述 | 违约 |
---|---|---|
spring.ai.watsonx.ai.embedding.enabled |
启用 Watsonx.ai 嵌入模型 |
真 |
spring.ai.watsonx.ai.embedding.options.model |
要使用的嵌入模型 |
IBM/SLATE-30M-中文-RTRVR |
运行时选项
WatsonxAiEmbeddingOptions.java 提供 Watsonx.ai 配置,例如要使用的模型。
也可以使用 properties 配置默认选项。spring.ai.watsonx.embedding.options
EmbeddingResponse embeddingResponse = embeddingModel.call(
new EmbeddingRequest(List.of("Hello World", "World is big and salvation is near"),
WatsonxAiEmbeddingOptions.create()
.withModel("Different-Embedding-Model-Deployment-Name"))
);
Samples控制器
这将创建一个可以注入到类中的实现。
下面是一个使用该实现的简单类的示例。EmbeddingModel
@Controller
EmbeddingModel
@RestController
public class EmbeddingController {
private final EmbeddingModel embeddingModel;
@Autowired
public EmbeddingController(EmbeddingModel embeddingModel) {
this.embeddingModel = embeddingModel;
}
@GetMapping("/ai/embedding")
public ResponseEntity<Embedding> embedding(@RequestParam String text) {
EmbeddingResponse response = this.embeddingModel.embedForResponse(List.of(text));
return ResponseEntity.ok(response.getResult());
}
}