watsonx.ai 嵌入

使用 Watsonx.ai 您可以运行各种大型语言模型 (LLM) 并从中生成嵌入。 Spring AI 支持使用 Watsonx.ai 文本嵌入。WatsonxAiEmbeddingModelspring-doc.cn

嵌入是浮点数的向量(列表)。 两个向量之间的距离衡量它们的相关性。 小距离表示高相关性,大距离表示低相关性。spring-doc.cn

先决条件

您首先需要拥有 watsonx.ai 的 SaaS 实例(以及一个 IBM Cloud 帐户)。spring-doc.cn

请参阅免费试用以免费试用 watsonx.aispring-doc.cn

更多信息可以在这里找到

添加存储库和 BOM

Spring AI 工件发布在 Spring Milestone 和 Snapshot 存储库中。请参阅 Repositories 部分,将这些存储库添加到您的构建系统中。spring-doc.cn

为了帮助进行依赖项管理,Spring AI 提供了一个 BOM(物料清单),以确保在整个项目中使用一致的 Spring AI 版本。请参阅依赖项管理部分,将 Spring AI BOM 添加到您的构建系统中。spring-doc.cn

自动配置

Spring AI 为 Watsonx.ai Embedding 模型提供 Spring Boot 自动配置。 要启用它,请将以下依赖项添加到您的 Maven 文件中:pom.xmlspring-doc.cn

<dependency>
   <groupId>org.springframework.ai</groupId>
   <artifactId>spring-ai-watsonx-ai-spring-boot-starter</artifactId>
</dependency>

或您的 Gradle 构建文件。build.gradlespring-doc.cn

dependencies {
    implementation 'org.springframework.ai:spring-ai-watsonx-ai-spring-boot-starter'
}
请参阅 Dependency Management 部分,将 Spring AI BOM 添加到您的构建文件中。

这些属性用于配置用于所有嵌入请求的默认选项。spring.ai.watsonx.embedding.options.*spring-doc.cn

嵌入属性

前缀用作允许您连接到 watsonx.ai 的属性前缀。spring.ai.watsonx.aispring-doc.cn

财产 描述 违约

spring.ai.watsonx.ai.base-urlspring-doc.cn

要连接到的 URLspring-doc.cn

us-south.ml.cloud.ibm.comspring-doc.cn

spring.ai.watsonx.ai.embedding-endpointspring-doc.cn

文本端点spring-doc.cn

ml/v1/text/embeddings?版本=2023-05-29spring-doc.cn

spring.ai.watsonx.ai.project-idspring-doc.cn

项目 IDspring-doc.cn

-spring-doc.cn

spring.ai.watsonx.ai.iam-tokenspring-doc.cn

IBM Cloud 帐户 IAM 令牌spring-doc.cn

-spring-doc.cn

prefix 是配置 Watsonx.ai 实现的属性 prefix。spring.ai.watsonx.embedding.optionsEmbeddingModelspring-doc.cn

财产 描述 违约

spring.ai.watsonx.ai.embedding.enabledspring-doc.cn

启用 Watsonx.ai 嵌入模型spring-doc.cn

spring-doc.cn

spring.ai.watsonx.ai.embedding.options.modelspring-doc.cn

要使用的嵌入模型spring-doc.cn

IBM/SLATE-30M-中文-RTRVRspring-doc.cn

运行时选项

WatsonxAiEmbeddingOptions.java 提供 Watsonx.ai 配置,例如要使用的模型。spring-doc.cn

也可以使用 properties 配置默认选项。spring.ai.watsonx.embedding.optionsspring-doc.cn

EmbeddingResponse embeddingResponse = embeddingModel.call(
    new EmbeddingRequest(List.of("Hello World", "World is big and salvation is near"),
        WatsonxAiEmbeddingOptions.create()
            .withModel("Different-Embedding-Model-Deployment-Name"))
);

Samples控制器

这将创建一个可以注入到类中的实现。 下面是一个使用该实现的简单类的示例。EmbeddingModel@ControllerEmbeddingModelspring-doc.cn

@RestController
public class EmbeddingController {

    private final EmbeddingModel embeddingModel;

    @Autowired
    public EmbeddingController(EmbeddingModel embeddingModel) {
        this.embeddingModel = embeddingModel;
    }

    @GetMapping("/ai/embedding")
    public ResponseEntity<Embedding> embedding(@RequestParam String text) {
        EmbeddingResponse response = this.embeddingModel.embedForResponse(List.of(text));
        return ResponseEntity.ok(response.getResult());
    }
}