Azure OpenAI 图像生成

Spring AI 支持 DALL-E，即 Azure OpenAI 的图像生成模型。

先决条件

请从 Azure 门户的 Azure OpenAI 服务部分获取您的 Azure OpenAI endpoint 和 api-key。

Spring AI 定义了两个配置属性

spring.ai.azure.openai.api-key：将其设置为从 Azure 获取的API 密钥的值。
spring.ai.azure.openai.endpoint：将其设置为在 Azure 中预配模型时获取的终结点 URL。

您可以在 application.properties 文件中设置这些配置属性

spring.ai.azure.openai.api-key=<your-azure-openai-api-key>
spring.ai.azure.openai.endpoint=<your-azure-openai-endpoint>

为了在处理 API 密钥等敏感信息时增强安全性，您可以使用 Spring 表达式语言 (SpEL) 来引用自定义环境变量

# In application.yml
spring:
  ai:
    azure:
      openai:
        api-key: ${AZURE_OPENAI_API_KEY}
        endpoint: ${AZURE_OPENAI_ENDPOINT}

# In your environment or .env file
export AZURE_OPENAI_API_KEY=<your-azure-openai-api-key>
export AZURE_OPENAI_ENDPOINT=<your-azure-openai-endpoint>

您还可以在应用程序代码中以编程方式设置这些配置

// Retrieve API key and endpoint from secure sources or environment variables
String apiKey = System.getenv("AZURE_OPENAI_API_KEY");
String endpoint = System.getenv("AZURE_OPENAI_ENDPOINT");

部署名称

要运行 Azure AI 应用程序，请通过 [Azure AI 门户](oai.azure.com/portal) 创建 Azure AI 部署。

在 Azure 中，每个客户端都必须指定一个 部署名称 来连接到 Azure OpenAI 服务。

理解 部署名称 与您选择部署的模型不同这一点至关重要。

例如，名为 'MyImgAiDeployment' 的部署可以配置为使用 Dalle3 模型或 Dalle2 模型。

目前，为了简单起见，您可以使用以下设置创建部署：

部署名称：MyImgAiDeployment 模型名称：Dalle3

此 Azure 配置将与 Spring Boot Azure AI Starter 及其自动配置功能的默认配置保持一致。

如果您使用不同的部署名称，请相应地更新配置属性。

spring.ai.azure.openai.image.options.deployment-name=<my deployment name>

Azure OpenAI 和 OpenAI 不同的部署结构导致 Azure OpenAI 客户端库中有一个名为 deploymentOrModelName 的属性。这是因为在 OpenAI 中没有 部署名称，只有 模型名称。

添加存储库和 BOM

Spring AI 工件发布在 Maven Central 和 Spring Snapshot 存储库中。请参阅工件存储库部分，将这些存储库添加到您的构建系统。

为了帮助管理依赖项，Spring AI 提供了一个 BOM（物料清单），以确保在整个项目中使用的 Spring AI 版本一致。请参阅依赖项管理部分，将 Spring AI BOM 添加到您的构建系统。

自动配置

Spring AI 自动配置、启动模块的工件名称发生了重大变化。请参阅升级说明以获取更多信息。

Spring AI 为 Azure OpenAI 聊天客户端提供了 Spring Boot 自动配置。要启用它，请将以下依赖项添加到您的项目 Maven pom.xml 文件中：

<dependency>
    <groupId>org.springframework.ai</groupId>
    <artifactId>spring-ai-starter-model-azure-openai</artifactId>
</dependency>

或添加到您的 Gradle build.gradle 构建文件中。

dependencies {
    implementation 'org.springframework.ai:spring-ai-starter-model-azure-openai'
}

请参阅依赖项管理部分，将 Spring AI BOM 添加到您的构建文件中。

图像生成属性

图像自动配置的启用和禁用现在通过具有前缀 spring.ai.model.image 的顶级属性进行配置。

要启用，spring.ai.model.image=azure-openai (默认启用)

要禁用，spring.ai.model.image=none (或任何不匹配 azure-openai 的值)

此更改是为了允许配置多个模型。

前缀 spring.ai.openai.image 是用于配置 OpenAI 的 ImageModel 实现的属性前缀。

财产

描述

默认值

spring.ai.azure.openai.image.enabled (已删除且不再有效)

启用 OpenAI 图像模型。

true

spring.ai.model.image

启用 OpenAI 图像模型。

azure-openai

spring.ai.azure.openai.image.options.n

要生成的图像数量。必须介于 1 到 10 之间。对于 dall-e-3，仅支持 n=1。

spring.ai.azure.openai.image.options.model

用于图像生成的模型。

AzureOpenAiImageOptions.DEFAULT_IMAGE_MODEL

spring.ai.azure.openai.image.options.quality

将生成的图像质量。HD 创建的图像细节更精细，图像一致性更高。此参数仅支持 dall-e-3。

spring.ai.azure.openai.image.options.response_format

返回生成图像的格式。必须是 URL 或 b64_json 之一。

spring.ai.openai.image.options.size

生成图像的大小。对于 dall-e-2，必须是 256x256、512x512 或 1024x1024 之一。对于 dall-e-3 模型，必须是 1024x1024、1792x1024 或 1024x1792 之一。

spring.ai.openai.image.options.size_width

生成图像的宽度。对于 dall-e-2，必须是 256、512 或 1024 之一。

spring.ai.openai.image.options.size_height

生成图像的高度。对于 dall-e-2，必须是 256、512 或 1024 之一。

spring.ai.openai.image.options.style

生成图像的样式。必须是 vivid 或 natural 之一。vivid 导致模型倾向于生成超现实和戏剧性的图像。natural 导致模型生成更自然、更不超现实的图像。此参数仅支持 dall-e-3。

spring.ai.openai.image.options.user

代表您的最终用户的唯一标识符，可帮助 Azure OpenAI 监控和检测滥用行为。

连接属性

前缀 spring.ai.openai 用作连接到 Azure OpenAI 的属性前缀。

财产

描述

默认值

spring.ai.azure.openai.endpoint

要连接的 URL

my-dalle3.openai.azure.com/

spring.ai.azure.openai.apiKey

API 密钥

运行时选项

OpenAiImageOptions.java 提供了模型配置，例如要使用的模型、质量、大小等。

在启动时，可以通过 AzureOpenAiImageModel(OpenAiImageApi openAiImageApi) 构造函数和 withDefaultOptions(OpenAiImageOptions defaultOptions) 方法配置默认选项。或者，使用前面描述的 spring.ai.azure.openai.image.options.* 属性。

在运行时，您可以通过向 ImagePrompt 调用添加新的、特定于请求的选项来覆盖默认选项。例如，要覆盖 OpenAI 特定选项，例如质量和要创建的图像数量，请使用以下代码示例：

ImageResponse response = azureOpenaiImageModel.call(
        new ImagePrompt("A light cream colored mini golden doodle",
        OpenAiImageOptions.builder()
                .quality("hd")
                .N(4)
                .height(1024)
                .width(1024).build())

);

除了模型特定的 AzureOpenAiImageOptions 之外，您还可以使用可移植的 ImageOptions 实例，该实例使用 ImageOptionsBuilder#builder() 创建。