SpringAI与LangChain4j的智能应用-(理论篇3)

SpringAi和LangChain4j揭开面纱 本文对比了SpringAI和LangChain4j两个AI开发框架。SpringAI深度集成Spring生态,配置简单,适合企业级应用快速接入AI能力;LangChain4j是Python版LangChain的Java移植,模块化设计更灵活,适合复杂AI工作流开发。文章通过表格详细对比了两者在生态、设计哲学、Spring集成、核心抽象和功能特性等方面的区别,并分别介绍了它们的特点和适用场景。作者表示后续将分享这两个框架的实战使用案例。 阅读详情

使用SpringAI的核心机制,核心是掌握其“标准化抽象层+Spring生态融合”的设计逻辑,从「环境搭建→核心接口使用→生态融合→高级特性」逐步落地,以下是可直接实操的步骤指南,覆盖80%的核心使用场景:

一、基础准备:环境搭建与核心依赖

1. 版本适配(关键)
  • Spring Boot版本:建议3.2.x及以上(SpringAI 1.0.x系列适配Spring Boot 3.2+);
  • Java版本:17及以上;
  • 依赖管理:通过Maven/Gradle引入SpringAI核心依赖,优先使用Starter简化配置。
2. 核心依赖引入(Maven pom.xml)

以接入OpenAI和Ollama(开源本地模型)为例,引入最常用的Starter:

<dependencies>
    <!-- SpringAI核心依赖 -->
    <dependency>
        <groupId>org.springframework.ai</groupId>
        <artifactId>spring-ai-core</artifactId>
        <version>1.0.0-M1</version> <!-- 最新版本可查Maven中央仓库 -->
    </dependency>
    <!-- OpenAI Starter(自动配置) -->
    <dependency>
        <groupId>org.springframework.ai</groupId>
        <artifactId>spring-ai-openai-spring-boot-starter</artifactId>
        <version>1.0.0-M1</version>
    </dependency>
    <!-- Ollama Starter(本地开源模型) -->
    <dependency>
        <groupId>org.springframework.ai</groupId>
        <artifactId>spring-ai-ollama-spring-boot-starter</artifactId>
        <version>1.0.0-M1</version>
    </dependency>
    <!-- Spring Boot基础依赖(web/actuator等) -->
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-web</artifactId>
    </dependency>
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-actuator</artifactId> <!-- 监控AI调用 -->
    </dependency>
</dependencies>

<!-- 仓库配置(SpringAI Milestone版本需添加) -->
<repositories>
    <repository>
        <id>spring-milestones</id>
        <name>Spring Milestones</name>
        <url>https://repo.spring.io/milestone</url>
        <snapshots>
            <enabled>false</enabled>
        </snapshots>
    </repository>
</repositories>
3. 核心配置(application.yml)

通过配置外部化管理模型参数,体现SpringAI“约定优于配置”的核心机制:

spring:
  # AI核心配置
  ai:
    # OpenAI配置
    openai:
      api-key: ${OPENAI_API_KEY} # 环境变量注入,避免硬编码
      chat:
        model: gpt-4o # 模型名称
        temperature: 0.3 # 随机性
        max-tokens: 2000 # 最大生成token
    # Ollama配置(本地部署的Llama3/Phi3等)
    ollama:
      base-url: http://localhost:11434 # Ollama服务地址
      chat:
        model: llama3 # 本地模型名称
        temperature: 0.5
  # 监控配置(暴露AI调用指标)
  boot:
    actuator:
      endpoints:
        web:
          exposure:
            include: ai,metrics,health # 暴露AI相关监控端点

# 日志配置(便于调试AI调用)
logging:
  level:
    org.springframework.ai: DEBUG # 打印AI调用的请求/响应日志

二、核心机制1:使用标准化抽象层(统一AI调用)

SpringAI最核心的机制是通过标准化接口屏蔽不同模型的差异,以下是核心接口的使用示例:

1. 基础:ChatClient(聊天/对话型AI)

ChatClient是SpringAI最常用的接口,适配所有对话型模型(OpenAI/GPT-4o、Ollama/Llama3、百度文心等),使用方式完全统一。

(1)简单调用(注入即使用)
import org.springframework.ai.chat.ChatClient;
import org.springframework.ai.chat.ChatResponse;
import org.springframework.ai.chat.prompt.Prompt;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;

@RestController
@RequestMapping("/ai/chat")
public class ChatController {
    // 注入SpringAI自动配置的ChatClient(默认使用OpenAI,可通过配置切换)
    @Autowired
    private ChatClient chatClient;

    // 基础对话接口
    @GetMapping("/simple")
    public String simpleChat(@RequestParam String message) {
        // 方式1:极简调用(适合快速测试)
        // return chatClient.call(message);

        // 方式2:标准化Prompt调用(推荐,支持上下文、参数定制)
        Prompt prompt = Prompt.of(message);
        ChatResponse response = chatClient.call(prompt);
        // 提取响应内容
        return response.getResult().getOutput().getContent();
    }
}
(2)多模型切换(通过@Qualifier指定)

若同时配置了OpenAI和Ollama,可通过@Qualifier指定使用的模型:

@RestController
@RequestMapping("/ai/chat")
public class MultiModelChatController {
    // 注入OpenAI的ChatClient
    @Autowired
    @Qualifier("openAiChatClient")
    private ChatClient openAiChatClient;

    // 注入Ollama的ChatClient
    @Autowired
    @Qualifier("ollamaChatClient")
    private ChatClient ollamaChatClient;

    // 使用OpenAI
    @GetMapping("/openai")
    public String chatWithOpenAI(@RequestParam String message) {
        return openAiChatClient.call(message);
    }

    // 使用Ollama(本地模型)
    @GetMapping("/ollama")
    public String chatWithOllama(@RequestParam String message) {
        return ollamaChatClient.call(message);
    }
}
(3)带上下文的对话(多轮交互)

SpringAI支持通过Prompt的SystemMessage和UserMessage构建上下文:

@GetMapping("/context")
public String contextChat(@RequestParam String question) {
    // 构建多轮上下文
    Prompt prompt = Prompt.builder()
            // 系统提示(定义AI角色)
            .add("system", "你是一个电商客服,仅回答订单相关问题,其他问题请拒绝")
            // 历史对话(模拟)
            .add("user", "我的订单号是10086,什么时候发货?")
            .add("assistant", "订单10086正在备货,预计24小时内发货")
            // 最新问题
            .add("user", question)
            .build();
    return chatClient.call(prompt);
}
2. 进阶:Prompt模板化(复用Prompt)

SpringAI的Prompt模板机制解决硬编码问题,支持动态参数填充(基于Mustache语法):

(1)定义Prompt模板(Bean方式)
import org.springframework.ai.chat.prompt.PromptTemplate;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

@Configuration
public class PromptConfig {
    // 定义订单分析的Prompt模板
    @Bean
    public PromptTemplate orderAnalysisPromptTemplate() {
        String template = """
                分析用户{{userId}}的订单数据:{{orderList}}
                要求:
                1. 输出消费偏好(仅列商品类别);
                2. 输出最近30天消费金额;
                3. 语言简洁,不超过100字。
                """;
        return PromptTemplate.of(template);
    }
}
(2)使用模板调用AI
@RestController
@RequestMapping("/ai/order")
public class OrderAnalysisController {
    @Autowired
    private ChatClient chatClient;
    @Autowired
    private PromptTemplate orderAnalysisPromptTemplate;

    @GetMapping("/analyze")
    public String analyzeOrder(
            @RequestParam String userId,
            @RequestParam String orderList) {
        // 填充模板参数
        Prompt prompt = orderAnalysisPromptTemplate.create(Map.of(
                "userId", userId,
                "orderList", orderList
        ));
        return chatClient.call(prompt);
    }
}
3. 高级:流式响应(实时交互)

SpringAI支持流式响应(如ChatGPT的逐字输出),适配Spring WebFlux:

import org.springframework.ai.chat.streaming.ChatStreamingClient;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;
import reactor.core.publisher.Flux;

@RestController
@RequestMapping("/ai/stream")
public class StreamChatController {
    // 注入流式ChatClient(自动适配OpenAI/Ollama的流式接口)
    @Autowired
    private ChatStreamingClient chatStreamingClient;

    // 流式对话接口(返回Flux<String>,前端可实时接收)
    @GetMapping("/chat")
    public Flux<String> streamChat(@RequestParam String message) {
        return chatStreamingClient.stream(message)
                .map(response -> response.getOutput().getContent());
    }
}

三、核心机制2:融合Spring生态(企业级特性)

SpringAI的核心价值在于将AI能力融入Spring的企业级生态,以下是关键场景的使用示例:

1. 事务管理:AI调用纳入Spring事务

确保AI调用与数据库操作的原子性(如金融风控、订单分析):

import org.springframework.ai.chat.ChatClient;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;

@Service
public class RiskAssessmentService {
    @Autowired
    private ChatClient chatClient;
    @Autowired
    private RiskResultRepository riskRepo; // Spring Data JPA Repository

    // AI评分+入库,纳入Spring事务
    @Transactional(rollbackFor = Exception.class)
    public String assessRisk(String userId) {
        // Step1:AI生成风险评分(SpringAI调用)
        String scorePrompt = "评估用户" + userId + "的贷款风险,仅输出0-100的数字评分";
        String riskScore = chatClient.call(scorePrompt);

        // Step2:评分入库(Spring Data JPA)
        RiskResult result = new RiskResult(userId, Integer.parseInt(riskScore));
        riskRepo.save(result);

        // 若入库失败,整个事务回滚(包括AI调用的日志记录等)
        return riskScore;
    }
}
2. 权限管控:Spring Security集成

通过Spring Security管控AI接口的调用权限:

import org.springframework.ai.chat.ChatClient;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.security.access.prepost.PreAuthorize;
import org.springframework.web.bind.annotation.PostMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;

@RestController
@RequestMapping("/ai/medical")
public class MedicalAIController {
    @Autowired
    private ChatClient medicalChatClient;

    // 仅ROLE_DOCTOR角色可调用影像分析接口
    @PostMapping("/analyze-image")
    @PreAuthorize("hasRole('DOCTOR')")
    public String analyzeMedicalImage(@RequestParam String imageInfo) {
        String prompt = "分析医疗影像信息:" + imageInfo + ",输出诊断建议(仅供参考)";
        return medicalChatClient.call(prompt);
    }
}
3. 配置外部化:动态调整AI参数

通过Spring Boot的配置体系,动态调整模型参数(支持环境变量、配置中心):

import org.springframework.ai.chat.ChatClient;
import org.springframework.ai.chat.prompt.Prompt;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RestController;

@RestController
@RequestMapping("/ai/config")
public class ConfigurableChatController {
    @Autowired
    private ChatClient chatClient;

    // 从配置文件/环境变量读取温度参数
    @Value("${spring.ai.openai.chat.temperature:0.5}")
    private float temperature;

    @GetMapping("/custom")
    public String customChat(@RequestParam String message) {
        Prompt prompt = Prompt.builder()
                .content(message)
                .temperature(temperature) // 动态参数
                .build();
        return chatClient.call(prompt);
    }
}

四、核心机制3:向量嵌入与向量数据库(EmbeddingModel)

SpringAI的EmbeddingModel接口统一文本嵌入能力,可无缝集成向量数据库(如Milvus、PgVector),适用于RAG(检索增强生成)场景:

1. 文本嵌入生成
import org.springframework.ai.embedding.EmbeddingModel;
import org.springframework.ai.embedding.EmbeddingResponse;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;

@RestController
@RequestMapping("/ai/embedding")
public class EmbeddingController {
    @Autowired
    private EmbeddingModel embeddingModel; // 自动配置的OpenAI Embedding模型

    @GetMapping("/generate")
    public String generateEmbedding(@RequestParam String text) {
        // 生成文本嵌入向量
        EmbeddingResponse response = embeddingModel.embed(text);
        // 提取向量(返回维度:OpenAI text-embedding-3-small为1536维)
        return response.getEmbeddings().get(0).getEmbedding().toString();
    }
}
2. 向量数据库集成(以PgVector为例)
import org.springframework.ai.vectorstore.PgVectorStore;
import org.springframework.ai.vectorstore.SearchRequest;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Service;

@Service
public class RAGService {
    @Autowired
    private PgVectorStore vectorStore; // 自动配置的PgVector存储

    // 检索相似文本(RAG前置步骤)
    public String searchSimilar(String query) {
        // 检索Top3相似文本
        var results = vectorStore.similaritySearch(SearchRequest.query(query).topK(3));
        // 拼接检索结果
        return results.stream()
                .map(result -> result.getContent())
                .reduce("", (a, b) -> a + "\n" + b);
    }
}

五、核心机制4:监控与可观测性

SpringAI集成Spring Boot Actuator,可实时监控AI调用的指标(次数、耗时、失败率):

  1. 访问http://localhost:8080/actuator/ai:查看AI模型的配置信息;
  2. 访问http://localhost:8080/actuator/metrics/spring.ai.chat.client.calls:查看ChatClient的调用次数;
  3. 访问http://localhost:8080/actuator/metrics/spring.ai.chat.client.duration:查看ChatClient的调用耗时。

六、核心使用原则与最佳实践

  1. 优先使用Starter:通过Starter引入依赖,利用自动配置减少手动编码;
  2. 依赖注入而非手动创建:所有AI组件(ChatClient、EmbeddingModel)均为Spring Bean,通过@Autowired注入;
  3. 模板化Prompt:避免硬编码Prompt,通过PromptTemplate提高复用性;
  4. 配置外部化:敏感参数(API Key)通过环境变量注入,模型参数(temperature)通过配置文件管理;
  5. 生态融合优先:AI调用尽量结合Spring事务、安全、监控等特性,而非单独使用;
  6. 多模型适配:通过@Qualifier或条件配置实现多模型切换,降低技术绑定风险。

总结

使用SpringAI的核心机制,本质是**“用Spring的方式使用AI”**:

  • 基础层:通过ChatClient/EmbeddingModel等标准化接口统一AI调用,屏蔽模型差异;
  • 生态层:将AI调用融入Spring事务、安全、配置、监控等企业级特性;
  • 进阶层:结合Prompt模板、流式响应、向量数据库实现复杂场景。

遵循“配置先行→接口注入→生态融合”的步骤,可快速将AI能力集成到Spring应用中,同时保证企业级应用的稳定性和可维护性。

在Spring Boot项目中使用SpringAI的核心机制,核心是依托Spring Boot的自动配置、依赖注入特性,结合SpringAI的标准化AI接口和生态融合能力,实现低侵入、企业级的AI能力集成。以下是从「环境搭建→核心接口使用→生态融合→高级场景」的完整实操指南,覆盖90%的主流使用场景:

一、前置准备:环境与依赖配置

1. 版本适配(关键)
组件推荐版本
Spring Boot3.2.x 及以上
Java17 及以上
SpringAI1.0.0-M1 及以上(Milestone版本)
2. Maven依赖配置(pom.xml)

引入SpringAI核心Starter和Spring Boot基础依赖,以接入OpenAI(商用模型)和Ollama(本地开源模型)为例:

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
    <parent>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-parent</artifactId>
        <version>3.2.5</version>
        <relativePath/>
    </parent>
    <groupId>com.example</groupId>
    <artifactId>springai-demo</artifactId>
    <version>0.0.1-SNAPSHOT</version>
    <name>springai-demo</name>

    <dependencies>
        <!-- SpringAI核心依赖 -->
        <dependency>
            <groupId>org.springframework.ai</groupId>
            <artifactId>spring-ai-core</artifactId>
            <version>1.0.0-M1</version>
        </dependency>
        <!-- OpenAI自动配置Starter -->
        <dependency>
            <groupId>org.springframework.ai</groupId>
            <artifactId>spring-ai-openai-spring-boot-starter</artifactId>
            <version>1.0.0-M1</version>
        </dependency>
        <!-- Ollama(本地模型)自动配置Starter -->
        <dependency>
            <groupId>org.springframework.ai</groupId>
            <artifactId>spring-ai-ollama-spring-boot-starter</artifactId>
            <version>1.0.0-M1</version>
        </dependency>

        <!-- Spring Boot基础依赖 -->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-web</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-security</artifactId> <!-- 权限管控 -->
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-data-jpa</artifactId> <!-- 数据库操作 -->
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-actuator</artifactId> <!-- 监控AI调用 -->
        </dependency>

        <!-- 测试依赖 -->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-test</artifactId>
            <scope>test</scope>
        </dependency>
    </dependencies>

    <!-- SpringAI Milestone仓库配置(必加) -->
    <repositories>
        <repository>
            <id>spring-milestones</id>
            <name>Spring Milestones</name>
            <url>https://repo.spring.io/milestone</url>
            <snapshots>
                <enabled>false</enabled>
            </snapshots>
        </repository>
    </repositories>
</project>
3. 核心配置(application.yml)

通过Spring Boot配置体系管理AI模型参数,体现“配置外部化”核心机制:

spring:
  # 1. AI模型配置(核心)
  ai:
    # OpenAI配置
    openai:
      api-key: ${OPENAI_API_KEY} # 环境变量注入,避免硬编码
      chat:
        model: gpt-4o
        temperature: 0.3 # 随机性,0-1
        max-tokens: 2000 # 最大生成token数
    # Ollama配置(本地部署Llama3/Phi3等模型)
    ollama:
      base-url: http://localhost:11434 # Ollama服务地址(本地启动Ollama后默认)
      chat:
        model: llama3
        temperature: 0.5

  # 2. 数据库配置(示例:结合事务使用)
  datasource:
    url: jdbc:mysql://localhost:3306/springai_demo?useUnicode=true&characterEncoding=utf8&serverTimezone=UTC
    username: root
    password: root123
    driver-class-name: com.mysql.cj.jdbc.Driver
  jpa:
    hibernate:
      ddl-auto: update
    show-sql: true

  # 3. Spring Security配置(权限管控)
  security:
    user:
      name: admin
      password: admin123
      roles: ADMIN

  # 4. Actuator监控配置(暴露AI指标)
  boot:
    actuator:
      endpoints:
        web:
          exposure:
            include: ai,metrics,health,info # 暴露AI相关监控端点

# 日志配置(调试AI调用)
logging:
  level:
    org.springframework.ai: DEBUG # 打印AI请求/响应日志
    org.springframework.transaction: DEBUG # 事务日志

二、核心机制1:标准化AI接口使用(ChatClient/EmbeddingModel)

SpringAI的核心是通过标准化接口屏蔽不同AI模型的差异,以下是最常用的ChatClient(对话AI)和EmbeddingModel(文本嵌入)的使用示例。

1. 基础:ChatClient(对话/文本生成)

ChatClient是SpringAI最核心的接口,适配所有对话型模型,Spring Boot会自动配置Bean,直接注入即可使用。

(1)极简调用(快速接入)
package com.example.springai.demo.controller;

import org.springframework.ai.chat.ChatClient;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;

/**
 * 基础对话接口示例
 */
@RestController
@RequestMapping("/ai/chat")
public class BasicChatController {

    // 注入SpringAI自动配置的ChatClient(默认使用OpenAI,可通过配置切换)
    @Autowired
    private ChatClient chatClient;

    /**
     * 简单对话接口
     * 访问示例:http://localhost:8080/ai/chat/simple?message=介绍SpringAI
     */
    @GetMapping("/simple")
    public String simpleChat(@RequestParam String message) {
        // 极简调用:一行代码完成AI请求
        return chatClient.call(message);
    }
}
(2)多模型切换(@Qualifier指定)

若同时配置了OpenAI和Ollama,通过@Qualifier指定具体模型:

@RestController
@RequestMapping("/ai/chat")
public class MultiModelChatController {

    // 注入OpenAI的ChatClient
    @Autowired
    @Qualifier("openAiChatClient")
    private ChatClient openAiChatClient;

    // 注入Ollama的ChatClient
    @Autowired
    @Qualifier("ollamaChatClient")
    private ChatClient ollamaChatClient;

    /**
     * 使用OpenAI对话
     */
    @GetMapping("/openai")
    public String chatWithOpenAI(@RequestParam String message) {
        return openAiChatClient.call(message);
    }

    /**
     * 使用本地Ollama模型对话
     */
    @GetMapping("/ollama")
    public String chatWithOllama(@RequestParam String message) {
        return ollamaChatClient.call(message);
    }
}
(3)Prompt模板化(复用+动态参数)

解决Prompt硬编码问题,支持Mustache语法动态填充参数:

package com.example.springai.demo.controller;

import org.springframework.ai.chat.ChatClient;
import org.springframework.ai.chat.prompt.Prompt;
import org.springframework.ai.chat.prompt.PromptTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;

import java.util.Map;

/**
 * Prompt模板化示例(订单分析场景)
 */
@RestController
@RequestMapping("/ai/order")
public class OrderAnalysisController {

    @Autowired
    private ChatClient chatClient;

    // 定义Prompt模板(也可配置在yml中)
    private final PromptTemplate orderTemplate = PromptTemplate.of("""
            分析用户{{userId}}的订单数据:{{orderList}}
            要求:
            1. 输出消费偏好(仅列商品类别);
            2. 输出最近30天消费金额;
            3. 语言简洁,不超过100字。
            """);

    /**
     * 订单分析接口
     * 访问示例:http://localhost:8080/ai/order/analyze?userId=1001&orderList=[{"商品":"手机","金额":5000},{"商品":"耳机","金额":500}]
     */
    @GetMapping("/analyze")
    public String analyzeOrder(@RequestParam String userId, @RequestParam String orderList) {
        // 填充模板参数
        Prompt prompt = orderTemplate.create(Map.of(
                "userId", userId,
                "orderList", orderList
        ));
        // 调用AI并返回结果
        return chatClient.call(prompt);
    }
}
(4)流式响应(实时交互)

适配Spring WebFlux,实现AI响应逐字输出(如ChatGPT的实时打字效果):

package com.example.springai.demo.controller;

import org.springframework.ai.chat.streaming.ChatStreamingClient;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;
import reactor.core.publisher.Flux;

/**
 * 流式响应示例
 */
@RestController
@RequestMapping("/ai/stream")
public class StreamChatController {

    // 注入流式ChatClient
    @Autowired
    private ChatStreamingClient chatStreamingClient;

    /**
     * 流式对话接口(前端可实时接收)
     */
    @GetMapping("/chat")
    public Flux<String> streamChat(@RequestParam String message) {
        // 流式调用,返回Flux<String>
        return chatStreamingClient.stream(message)
                .map(response -> response.getOutput().getContent());
    }
}
2. 进阶:EmbeddingModel(文本嵌入,RAG场景)

EmbeddingModel统一文本嵌入能力,用于生成向量数据,适配向量数据库(如PgVector、Milvus):

package com.example.springai.demo.controller;

import org.springframework.ai.embedding.EmbeddingModel;
import org.springframework.ai.embedding.EmbeddingResponse;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;

/**
 * 文本嵌入(向量生成)示例
 */
@RestController
@RequestMapping("/ai/embedding")
public class EmbeddingController {

    @Autowired
    private EmbeddingModel embeddingModel; // 自动配置的OpenAI Embedding模型

    /**
     * 生成文本嵌入向量
     * 访问示例:http://localhost:8080/ai/embedding/generate?text=SpringAI是Spring生态的AI框架
     */
    @GetMapping("/generate")
    public String generateEmbedding(@RequestParam String text) {
        // 生成嵌入向量
        EmbeddingResponse response = embeddingModel.embed(text);
        // 提取向量(OpenAI text-embedding-3-small为1536维)
        return response.getEmbeddings().get(0).getEmbedding().toString();
    }
}

三、核心机制2:融合Spring Boot生态(事务/安全/监控)

SpringAI的核心价值是将AI能力融入Spring Boot的企业级特性,以下是事务、安全、监控的集成示例。

1. 事务管理:AI调用+数据库操作原子性

确保AI生成结果与数据库操作要么都成功,要么都回滚(如金融风控场景):

package com.example.springai.demo.service;

import com.example.springai.demo.entity.RiskResult;
import com.example.springai.demo.repository.RiskResultRepository;
import org.springframework.ai.chat.ChatClient;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;

/**
 * 风险评估服务(AI调用+事务管理)
 */
@Service
public class RiskAssessmentService {

    @Autowired
    private ChatClient chatClient;

    @Autowired
    private RiskResultRepository riskResultRepository; // Spring Data JPA Repository

    /**
     * 风险评估(AI评分+入库,事务管控)
     */
    @Transactional(rollbackFor = Exception.class)
    public String assessRisk(String userId) {
        // Step1:AI生成风险评分
        String prompt = "评估用户" + userId + "的贷款风险,仅输出0-100的数字评分";
        String riskScore = chatClient.call(prompt);

        // Step2:评分入库(若入库失败,整个事务回滚)
        RiskResult result = new RiskResult();
        result.setUserId(userId);
        result.setRiskScore(Integer.parseInt(riskScore));
        riskResultRepository.save(result);

        return riskScore;
    }
}

配套实体和Repository:

// 风险评估结果实体
package com.example.springai.demo.entity;

import jakarta.persistence.Entity;
import jakarta.persistence.Id;
import jakarta.persistence.GeneratedValue;
import jakarta.persistence.GenerationType;
import lombok.Data;

@Entity
@Data
public class RiskResult {
    @Id
    @GeneratedValue(strategy = GenerationType.IDENTITY)
    private Long id;
    private String userId;
    private Integer riskScore;
}

// Repository
package com.example.springai.demo.repository;

import com.example.springai.demo.entity.RiskResult;
import org.springframework.data.jpa.repository.JpaRepository;

public interface RiskResultRepository extends JpaRepository<RiskResult, Long> {
}

控制器(暴露接口):

@RestController
@RequestMapping("/ai/risk")
public class RiskAssessmentController {

    @Autowired
    private RiskAssessmentService riskAssessmentService;

    @GetMapping("/assess")
    public String assess(@RequestParam String userId) {
        return riskAssessmentService.assessRisk(userId);
    }
}
2. 权限管控:Spring Security集成

通过@PreAuthorize管控AI接口的调用权限(如仅管理员可调用风险评估):

@RestController
@RequestMapping("/ai/risk")
public class RiskAssessmentController {

    @Autowired
    private RiskAssessmentService riskAssessmentService;

    /**
     * 仅ADMIN角色可调用
     */
    @GetMapping("/assess")
    @PreAuthorize("hasRole('ADMIN')")
    public String assess(@RequestParam String userId) {
        return riskAssessmentService.assessRisk(userId);
    }
}
3. 监控与可观测性:Actuator集成

SpringAI内置了AI调用的监控指标,通过Actuator可直接访问:

  • 查看AI模型配置:http://localhost:8080/actuator/ai
  • 查看ChatClient调用次数:http://localhost:8080/actuator/metrics/spring.ai.chat.client.calls
  • 查看ChatClient调用耗时:http://localhost:8080/actuator/metrics/spring.ai.chat.client.duration
  • 查看健康状态:http://localhost:8080/actuator/health

四、核心机制3:自定义配置与扩展

若默认自动配置无法满足需求,可自定义SpringAI的Bean(如自定义ChatClient参数):

package com.example.springai.demo.config;

import org.springframework.ai.openai.OpenAiChatClient;
import org.springframework.ai.openai.OpenAiChatOptions;
import org.springframework.ai.openai.api.OpenAiApi;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

/**
 * 自定义SpringAI配置
 */
@Configuration
public class SpringAiConfig {

    @Value("${spring.ai.openai.api-key}")
    private String openAiApiKey;

    /**
     * 自定义OpenAI ChatClient(覆盖自动配置)
     */
    @Bean
    public OpenAiChatClient customOpenAiChatClient() {
        // 自定义API客户端
        OpenAiApi openAiApi = new OpenAiApi(openAiApiKey);
        // 自定义配置(如更高的temperature)
        OpenAiChatOptions options = OpenAiChatOptions.builder()
                .model("gpt-4o")
                .temperature(0.8)
                .maxTokens(3000)
                .build();
        // 创建自定义ChatClient
        return new OpenAiChatClient(openAiApi, options);
    }
}

五、启动与测试

1. 启动Ollama(本地模型,可选)

若使用Ollama,先本地启动Ollama服务,并拉取模型:

# 启动Ollama(需先安装Ollama)
ollama serve

# 拉取Llama3模型
ollama pull llama3
2. 启动Spring Boot项目
  • 配置环境变量OPENAI_API_KEY(你的OpenAI API Key);
  • 启动项目(Main类):
package com.example.springai.demo;

import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;

@SpringBootApplication
public class SpringAiDemoApplication {
    public static void main(String[] args) {
        SpringApplication.run(SpringAiDemoApplication.class, args);
    }
}
3. 测试接口
  • 简单对话:http://localhost:8080/ai/chat/simple?message=介绍SpringAI
  • 多模型切换:http://localhost:8080/ai/chat/ollama?message=介绍LangChain4j
  • 订单分析:http://localhost:8080/ai/order/analyze?userId=1001&orderList=[{"商品":"手机","金额":5000},{"商品":"耳机","金额":500}]
  • 风险评估(需ADMIN权限,访问时输入账号密码admin/admin123):http://localhost:8080/ai/risk/assess?userId=1001

六、最佳实践总结

  1. 依赖优先用Starter:利用Spring Boot自动配置,减少手动编码;
  2. 配置外部化:敏感参数(API Key)用环境变量,模型参数用application.yml;
  3. 接口注入使用:所有AI组件(ChatClient/EmbeddingModel)通过@Autowired注入,不手动new;
  4. 生态融合优先:AI调用结合Spring事务、安全、监控,而非单独使用;
  5. Prompt模板化:避免硬编码,提高复用性和可维护性;
  6. 多模型适配:通过@Qualifier或自定义Bean实现模型切换,降低技术绑定。

通过以上步骤,你可以在Spring Boot项目中完整使用SpringAI的核心机制,既享受标准化AI调用的便捷,又复用Spring生态的企业级特性,实现AI能力的低侵入、高可靠集成。

wireshark抓包查看langchain的ChatOpenAI接口发送和接收的数据 通过wireshark抓包,目的IP地址过滤,追踪流,就能看到langchain的ChatOpenAI发送的POST请求细节内容,并能依此构造一个POST请求来模拟该接口的通信。 阅读详情

相关推荐

LangChain4j

LangChain4j是一个流行的Java AI开发框架,提供开箱即用的API支持大模型调用和常见AI功能开发。它支持与SpringBoot集成,提供ChatModel基础交互、多模态处理、系统提示词、AIService高级抽象等功能。框架还支持会话记忆管理、结构化输出、RAG检索增强生成、工具调用和MCP协议扩展。开发模式上支持流式SSE接口响应,并包含输入输出护轨、日志观测等辅助功能。相比SpringAI,LangChain4j更加灵活,可独立于Spring使用,适合需要高度定制化的AI应用开发场景。

qq_57465625的博客 1550

AI大模型实用(三)Java快速实现智能体整理(Springboot+LangChain4j)

一个基于 Java 的库,旨在简化自然语言处理(NLP)和大型语言模型(LLM)的集成;提供了大量现成的组件(文档加载器、工具、链),用于构建AI应用,是目前Java生态中最接近Python LangChain成熟度的选择。

我的E家 5589

多模型集成AI聊天工具_支持ChatGPT_Gemini_LLaMA_DeepSeek_讯飞星火_通义千问_Kimi等国内外大语言模型API统一接入与界面整合_通过siderai实.zip

多模型集成AI聊天工具_支持ChatGPT_Gemini_LLaMA_DeepSeek_讯飞星火_通义千问_Kimi等国内外大语言模型API统一接入与界面整合_通过siderai实.zip

SpringBoot + LangChain4j实战:5分钟搞定DeepSeek和OpenAI双模型自由切换

本文详细介绍了如何利用SpringBoot与LangChain4j框架,在5分钟内实现DeepSeek和OpenAI双AI模型的灵活切换与统一调用。通过实战代码演示了多模型配置、智能路由策略及声明式服务集成,为构建企业级智能应用提供了高效、可维护的解决方案。

1a2s3d4f5g的博客 1080

从寄存器配置到G值:一份给STM32开发者的SC7A20加速度数据换算保姆级指南

本文为STM32开发者提供SC7A20三轴加速度传感器的数据换算保姆级指南,详细解析从寄存器配置到G值转换的全过程。涵盖量程选择、输出值换算原理及优化代码实现,帮助开发者快速掌握加速度数据的物理意义转换技巧,提升运动感知系统开发效率。

weixin_29172963的博客 172

[原创]Step by step 实现自己的AI知识库问答(二)

对小白很友好的AI智能问答开发保姆级教程,适合初级开发者、学生阅读参考,无限制分享,欢迎转载。在这个章节中,我们使用了百度千帆作为知识库,通过简单的代码调用API实现了智能问答。

BaiRiYiSanJin的博客 1469

SpringAI与LangChain4j的智能应用-(理论篇4)

SpringAI是“AI的Spring管家”,管接入、管管控、管融合,适合企业级项目;LangChain4j是“AI的流程包工头”,管拆解、管编排、管联动,适合复杂AI场景;配合用就“SpringAI打基础,LangChain4j做流程”,职责分清、别重复造轮子,新手也能快速落地AI功能。不用贪多,先把这两个框架的核心思想吃透,再动手写两行代码。SpringAI的底层是“集成思维”,核心教我们如何把新能力(AI)融入成熟生态,解决工程化、企业级的问题;

Coder_Boy_的博客 1149

如何把Excel的数据导入python?

Python数据分析——excl导入数据的简单方法(xlrd) 本文的初衷是发现网上很多Excel导入Python都没有结合具体Excel文档进行讲解,所以这篇文档将会呈现一个简单快速的Excel+Python的入门方法。 开发环境 Prerequisites: 在开始用Python导入Excel之前,要配置好自己的开发环境,最好有IDE(terminal也可)+安装相应的数据分析包。 IDE :pycharm,vscode,etc 数据分析包:matplotlib,xlrd,numpy,etc 导入数

qq_40783513的博客 7万+

SpringAI与LangChain4j的智能应用-(理论篇)

SpringAI与LangChain4j是Java生态中两大AI框架,各有侧重。SpringAI深度集成Spring生态,适合企业级应用智能化改造,典型场景包括电商评论分析、金融风控和医疗影像分析,能无缝对接Spring事务管理和权限控制。LangChain4j强调灵活性和多模型适配,适用于智能客服动态切换模型、代码生成工作流等创新型场景。选型需考虑技术栈(Spring优先选SpringAI)、核心诉求(灵活扩展选LangChain4j)和团队背景。二者也可结合使用,用SpringAI处理企业级集成,Lan

Coder_Boy_的博客 935

速腾聚创多激光雷达点云采集,并用RVIZ进行显示

在ubuntu20.04系统下,使用速腾聚创官方提供的软件RSView,对激光雷达的默认IP地址、MSOP 包端口号、 DIFOP包端口号和时间模式等配置进行查看和修改。使用交换机对两个激光雷达进行组网,实现多激光雷达数据采集,并用RVIZ同时显示两个雷达点云。使用wireshark对比两个雷达数据包。

abanchao的博客 5887

GPU服务器维修全流程:从检测到解锁

《GPU服务器维修维保全流程指南》摘要:本文系统介绍GPU服务器从检测到解锁的完整维修流程。检测环节包含物理检查(氧化层、散热、PCB板)和电子诊断(ECC报错率、电源波动等);核心维修技术涵盖PCB板修复(微孔镀铜、BGA返修)和芯片级维修(成功率78-92%);解锁验证阶段包括性能解锁(VBIOS重写)和72小时稳定性测试。文末提供故障速查表及维保建议,强调定期除尘可降低38%故障率,推荐环境粉尘浓度控制在≤0.3mg/m³。

2401_89353317的博客 889

SpringAI vs LangChain4j:Java生态大模型应用开发终极对决

摘要: 《SpringAI vs LangChain4j:Java生态大模型应用开发终极对决》深度对比了两大Java框架在企业级AI应用中的优劣。SpringAI依托Spring生态,强调自动配置与企业集成,适合复杂场景;LangChain4j移植Python生态,模块化设计灵活易用。文章从架构哲学、核心功能(对话、函数调用)到高级特性(会话记忆、流式响应)展开分析,并附可落地的代码示例(如SpringAI的自动函数注册与LangChain4j的手动工具装配),为开发者提供技术选型参考。数据显示,Java在

私聊前往站内信:https://i.youkuaiyun.com/#/msg/chat/weixin_44976692 3902

华为OD机试 - 单词倒序(Python/JS/C/C++ 2025 A卷 100分)

华为OD机试 2025A卷题库疯狂收录中,刷题。

学Java,找哪吒 1226

SpringAI与LangChain4j的智能应用-(实践篇)

本文比较了SpringAI和LangChain4j在AIOps日志分析场景下的实现方式。SpringAI通过标准化接口快速集成AI能力,适合简单场景的快速接入;LangChain4j则将任务拆解为可编排步骤,支持灵活扩展。SpringAI更侧重与Spring生态的无缝集成,而LangChain4j强调流程的可扩展性和步骤化处理。在AIOps场景中,SpringAI适合单一AI能力调用,LangChain4j则更适合需要多步骤编排的复杂流程。

Coder_Boy_的博客 1085

如何给K8S配置一个具有永久有效的kubeconfig

在 Amazon EKS 环境中,Kubernetes 的认证机制与 AWS IAM 深度集成,通过aws-iam-authenticator动态生成临时凭证。这种设计虽然增强了安全性,但给需要持久化凭证的工具链(如 CI/CD 系统中的 KubeVela)带来了挑战。具体表现为:临时凭证失效​​:默认 Token 有效期为 15 分钟至 1 小时;​​IAM 角色限制​​:直接使用aws eks get-token生成的凭证无法持久化

小杨同学的博客 659

5、流体-结构相互作用耦合技术详解

本文详细解析了流体-结构相互作用(FSI)的两种核心耦合技术:松散耦合和紧密耦合。通过原理阐述、优缺点分析及实际应用案例,对比了两种方法的适用场景与性能差异,并进一步探讨了高级耦合技术的发展趋势和工程实践方向,为相关领域的研究人员和工程师提供了全面的技术参考。

fanta的博客 203

SpringAI与LangChain4j的智能应用-(理论篇2)

LangChain4j的Chain机制通过模块化设计将AI任务拆解为可复用的步骤链,支持顺序或并行执行。核心包括Step(最小执行单元)、Input/Output(数据传递)、Context(共享容器)和Executor(流程控制器)。主要提供两种链类型:SimpleSequentialChain实现线性任务(如代码生成流程:需求解析→代码生成→优化),SequentialChain支持多输入输出的复杂场景(如电商推荐系统)。通过链式编排,开发者能灵活构建AI工作流,实现从简单到复杂的任务自动化处理。代码示

Coder_Boy_的博客 895

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

LangChain4j比SpringAI强在哪?一文读懂

LangChain4j 和 Spring AI 是 Java 生态中实现大模型应用开发的两个最重要的框架,但二者的区别是啥?生产级别又该使用哪种框架?令很多人犯了难,所以本文就来浅聊一下,希望给大家在技术选型时有一个简单的参考。LangChain4j 和 Spring AI 的功能是比较类似的,甚至两者可以配合使用,例如使用 Spring AI 实现 MCP 服务器端,再使用 LangChain4j 实现 MCP 客户端调用 Spring AI,二者可以无缝对接。那二者的区别是啥呢?总体来说,

2401_85375298的博客 2555

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

SpringAI与Langchain4j

SpringbootAI实现AI应用开发,Langchain4j实现AI应用开发

weixin_64434886的博客 932

SpringAI与LangChain4j:两大Java AI框架深度对比与实践指南

本文对比了Java生态中两大AI框架SpringAI与LangChain4j。SpringAI深度集成Spring生态,简化AI功能开发;LangChain4j则提供更丰富的AI组件和链式调用能力。文章从架构、功能特性两方面进行对比,并通过基础聊天应用案例展示两者差异:SpringAI配置简洁但功能有限,LangChain4j更灵活且支持记忆管理等高级特性。开发者在选择时需权衡易用性与功能完备性,SpringAI适合简单集成场景,LangChain4j则更适合复杂AI应用构建。

私聊前往站内信:https://i.youkuaiyun.com/#/msg/chat/weixin_44976692 2536

SpringAI与LangChain4j的智能应用-(实践篇4)

企业级存量系统智能化改造需遵循"最小侵入、价值优先"原则,分四阶段实施:1)前期准备(1-2周)明确业务目标,梳理系统现状;2)方案落地(2-8周)分三步改造数据层、集成AI能力并进行验证;3)上线推广(1-2周)全量部署并优化流程;4)持续迭代阶段建立数据闭环。关键要避免重构核心系统,采用插件化方式集成AI服务,优先选择高价值低改造场景(如AIOps异常分析),并确保数据安全合规。整个改造过程强调快速验证、分步落地,最终实现业务提效与运维优化。

Coder_Boy_的博客 1233

LangChain4j从入门到实战

LangChain4j从入门到实战项目全套视频课程,涵盖LangChain4j+ollama+RAG,Java传统项目AI智能化升级

写代码的渣渣苏 4221

SpringAI与LangChain4j的智能应用-(实践篇3)

本文介绍了一个企业级AIOps平台的核心实现方案,采用Spring Boot 3.x + Vue3技术栈,聚焦AIOps核心闭环流程:数据采集→异常检测→根因定位→自动处置。系统采用模块化设计,后端包含通用模块、核心业务模块和API网关,前端基于Vue3构建核心功能页面。核心流程实现了指标/日志采集、规则+AI异常检测、多源融合根因定位和分级自动处置功能,通过代码示例展示了指标采集和异常检测的关键实现。该系统优先保证核心链路可运行,剔除非核心功能,为AIOps实践提供精简而高效的参考方案。

Coder_Boy_的博客 666

LangChain4j系列:带你入门LangChain4j框架

本文所有示例均在 langchain4j 0.31.0 版本之上进行,langchain4j也是在快速发展的阶段。

2301_81940605的博客 1万+

Java 微服务 AI 集成:LangChain4j 与 SpringAI

本文对比了Java生态中两大AI集成框架LangChain4j与SpringAI的核心架构与实战应用。LangChain4j定位为灵活通用的LLM交互框架,支持多模型调用和链式处理;SpringAI则深度集成Spring生态,提供自动化配置和统一客户端抽象。从环境搭建到微服务集成,文章详细展示了两者在智能问答、多轮对话、语义搜索等场景的实现方案,并进行了性能对比与适用场景分析。最后提出了微服务中AI集成的最佳实践,包括性能优化、安全考虑和监控方案,为开发者选择框架提供指导建议。

果酱 の 博客 2181

第一章.干货干货!!!Langchain4j对接AI大模型-开发自己的智能体

在人工智能技术迅猛发展的今天,大型语言模型(LLM)已成为推动技术创新的核心引擎。从ChatGPT到Gemini,从Claude到文心一言,这些强大的AI模型正在重塑我们与计算机交互的方式,也为开发者提供了前所未有的机遇。然而,如何将这些前沿技术真正落地到实际应用中,构建出真正智能、实用的AI代理(Agent),仍是许多开发者面临的挑战。Java作为企业级应用开发的主流语言,在全球拥有庞大的开发者生态和丰富的应用场景。

墨家巨子@俏如来 2928
上一篇: SpringAI与LangChain4j的智能应用-(理论篇2)
下一篇: SpringAI与LangChain4j的智能应用-(理论篇4)
Coder_Boy_
博客等级 码龄10年 2804粉丝 819原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Coder_Boy_

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值