Oracle Database 23ai - AI 向量搜索
Oracle Database 23ai (23.4+) 的 AI 向量搜索 功能作为 Spring AI 的 VectorStore 提供,可帮助您存储文档嵌入并执行相似性搜索。当然,所有其他功能也可用。
| 本地运行 Oracle Database 23ai 附录展示了如何使用轻量级 Docker 容器启动数据库。 |
自动配置
|
Spring AI 自动配置、启动模块的工件名称发生了重大变化。请参阅 升级说明 以获取更多信息。 |
首先将 Oracle 向量存储启动器依赖项添加到您的项目中
<dependency>
<groupId>org.springframework.ai</groupId>
<artifactId>spring-ai-starter-vector-store-oracle</artifactId>
</dependency>
或添加到您的 Gradle build.gradle 构建文件中。
dependencies {
implementation 'org.springframework.ai:spring-ai-starter-vector-store-oracle'
}
如果您需要此向量存储为您初始化模式,那么您需要在相应的构造函数中为 initializeSchema 布尔参数传递 true,或者在 application.properties 文件中设置 …initialize-schema=true。
| 这是一个重大更改!在早期版本的 Spring AI 中,此模式初始化是默认发生的。 |
向量存储还需要一个 EmbeddingModel 实例来计算文档的嵌入。您可以选择一个可用的 EmbeddingModel 实现。
例如,要使用 OpenAI EmbeddingModel,请将以下依赖项添加到您的项目中
<dependency>
<groupId>org.springframework.ai</groupId>
<artifactId>spring-ai-starter-model-openai</artifactId>
</dependency>
或添加到您的 Gradle build.gradle 构建文件中。
dependencies {
implementation 'org.springframework.ai:spring-ai-starter-model-openai'
}
| 请参阅依赖管理部分,将 Spring AI BOM 添加到您的构建文件中。请参阅Artifact Repositories部分,将 Maven Central 和/或 Snapshot Repositories 添加到您的构建文件中。 |
要连接和配置 OracleVectorStore,您需要提供数据库的访问详细信息。一个简单的配置可以通过 Spring Boot 的 application.yml 提供
spring:
datasource:
url: jdbc:oracle:thin:@//:1521/freepdb1
username: mlops
password: mlops
ai:
vectorstore:
oracle:
index-type: IVF
distance-type: COSINE
dimensions: 1536
| 查看 配置参数 列表,了解默认值和配置选项。 |
现在您可以在您的应用程序中自动装配 OracleVectorStore 并使用它
@Autowired VectorStore vectorStore;
// ...
List<Document> documents = List.of(
new Document("Spring AI rocks!! Spring AI rocks!! Spring AI rocks!! Spring AI rocks!! Spring AI rocks!!", Map.of("meta1", "meta1")),
new Document("The World is Big and Salvation Lurks Around the Corner"),
new Document("You walk forward facing the past and you turn back toward the future.", Map.of("meta2", "meta2")));
// Add the documents to Oracle Vector Store
vectorStore.add(documents);
// Retrieve documents similar to a query
List<Document> results = this.vectorStore.similaritySearch(SearchRequest.builder().query("Spring").topK(5).build());
配置属性
您可以在 Spring Boot 配置中使用以下属性来自定义 OracleVectorStore。
| 财产 | 描述 | 默认值 |
|---|---|---|
|
最近邻搜索索引类型。选项包括 |
NONE |
|
搜索距离类型包括 注意:如果向量已归一化,您可以使用 |
COSINE |
|
允许在插入前和相似性搜索时启用向量归一化(如果为 true)。 注意:将其设置为 true 是允许 搜索请求相似性阈值 的必要条件。 注意:如果向量已归一化,您可以使用 |
假 |
|
嵌入维度。如果未明确指定,OracleVectorStore 将允许最大值:65535。维度在表创建时设置为嵌入列。如果您更改维度,则需要重新创建表。 |
65535 |
|
在启动时删除现有表。 |
假 |
|
是否初始化所需的模式。 |
假 |
|
表示在存在索引的情况下请求的精度目标。默认禁用。您需要提供一个介于 [1,100] 之间的整数来覆盖默认索引精度 (95)。使用较低的精度提供近似相似性搜索,以速度换取精度。 |
-1 ( |
元数据过滤
您可以将通用、可移植的 元数据过滤器 与 OracleVectorStore 一起使用。
例如,您可以使用文本表达式语言
vectorStore.similaritySearch(
SearchRequest.builder()
.query("The World")
.topK(TOP_K)
.similarityThreshold(SIMILARITY_THRESHOLD)
.filterExpression("author in ['john', 'jill'] && article_type == 'blog'").build());
或使用 `Filter.Expression` DSL 以编程方式
FilterExpressionBuilder b = new FilterExpressionBuilder();
vectorStore.similaritySearch(SearchRequest.builder()
.query("The World")
.topK(TOP_K)
.similarityThreshold(SIMILARITY_THRESHOLD)
.filterExpression(b.and(
b.in("author","john", "jill"),
b.eq("article_type", "blog")).build()).build());
这些过滤表达式将转换为等效的 OracleVectorStore 过滤器。 |
手动配置
您可以通过手动配置 OracleVectorStore 而不是使用 Spring Boot 自动配置。为此,您需要将 Oracle JDBC 驱动程序和 JdbcTemplate 自动配置依赖项添加到您的项目中
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-jdbc</artifactId>
</dependency>
<dependency>
<groupId>com.oracle.database.jdbc</groupId>
<artifactId>ojdbc11</artifactId>
<scope>runtime</scope>
</dependency>
<dependency>
<groupId>org.springframework.ai</groupId>
<artifactId>spring-ai-oracle-store</artifactId>
</dependency>
| 请参阅 依赖项管理 部分,将 Spring AI BOM 添加到您的构建文件中。 |
要在您的应用程序中配置 OracleVectorStore,您可以使用以下设置
@Bean
public VectorStore vectorStore(JdbcTemplate jdbcTemplate, EmbeddingModel embeddingModel) {
return OracleVectorStore.builder(jdbcTemplate, embeddingModel)
.tableName("my_vectors")
.indexType(OracleVectorStoreIndexType.IVF)
.distanceType(OracleVectorStoreDistanceType.COSINE)
.dimensions(1536)
.searchAccuracy(95)
.initializeSchema(true)
.build();
}
本地运行 Oracle Database 23ai
docker run --rm --name oracle23ai -p 1521:1521 -e APP_USER=mlops -e APP_USER_PASSWORD=mlops -e ORACLE_PASSWORD=mlops gvenzl/oracle-free:23-slim
然后您可以使用以下方式连接到数据库
sql mlops/mlops@localhost/freepdb1
访问原生客户端
Oracle Vector Store 实现通过 getNativeClient() 方法提供对底层原生 Oracle 客户端 (OracleConnection) 的访问
OracleVectorStore vectorStore = context.getBean(OracleVectorStore.class);
Optional<OracleConnection> nativeClient = vectorStore.getNativeClient();
if (nativeClient.isPresent()) {
OracleConnection connection = nativeClient.get();
// Use the native client for Oracle-specific operations
}
原生客户端允许您访问可能未通过 VectorStore 接口公开的特定于 Oracle 的功能和操作。