0

0

Spring Boot缓存中数据验证与缺失键处理策略

DDD

DDD

发布时间:2025-09-24 15:16:22

|

651人浏览过

|

来源于php中文网

原创

Spring Boot缓存中数据验证与缺失键处理策略

本文探讨了在Spring Boot缓存中,如何实现先验证现有缓存数据,再查询数据库获取缺失数据,并最终更新缓存的需求。我们分析了Spring Cache Abstraction的“全有或全无”特性,以及其默认行为在处理部分缓存、部分数据库查询场景时的局限性。文章将提供一种手动管理缓存的实现方案,并讨论其性能考量和替代策略,帮助开发者构建更灵活的缓存逻辑。

1. Spring Cache Abstraction 的默认行为与局限性

spring boot通过其核心框架的 cache abstraction 提供了声明式缓存支持,通常通过 @cacheable 等注解实现。然而,对于“先检查缓存中部分数据,再从数据库获取缺失数据”这种细粒度需求,spring开箱即用的 @cacheable 机制存在一些局限性。

1.1 “全有或全无”的缓存策略

Spring的缓存抽象机制本质上是对昂贵的服务方法或数据访问调用进行装饰(通过AOP)。这意味着,一个被 @Cacheable 注解的方法,其行为是“全有或全无”的:

  • 如果方法的整个缓存键(通常由所有方法参数组成)在缓存中存在,则该方法不会被执行,直接返回缓存值。
  • 如果缓存键不存在,则方法会被完全执行,其返回值会被缓存起来。 这种机制类似于 Map.computeIfAbsent(:KEY, :Function)。它无法在方法执行前检查部分键是否存在于缓存中,并根据检查结果动态调整数据库查询。

1.2 默认的缓存键生成策略

默认情况下,Spring Cache Abstraction使用方法的所有参数来生成缓存键。例如,对于 findByIds(Set ids) 方法:

@Cacheable("Students")
List findByIds(Set ids) {
  // ...
  return repository.findByIds(ids);
}

此时,缓存中存储的将是:

缓存键          | 缓存值
----------------|--------------
Set    | List

这意味着整个 Set 将作为单个键,对应的缓存值是整个 List。这与我们期望的按单个 Student ID进行缓存(例如:ID 1 -> Student A,ID 2 -> Student B)的粒度不符。虽然可以自定义键生成策略,但对于这种“批查询、单缓存”的需求,默认注解仍然难以直接实现。

1.3 Cache 接口的单键访问限制

Spring的 org.springframework.cache.Cache 接口是对底层缓存提供商(如EhCache, Redis, Hazelcast等)的适配器。该接口主要提供单键的 get、put、evict 等操作。这意味着,即使我们想手动查询缓存,也需要对每个ID进行单独的 get 调用:

Cache cache = cacheManager.getCache("Students");
Student student = cache.get(id, Student.class); // 逐个获取

对于需要查询大量ID的场景,这种逐个访问的方式可能会导致性能问题,尤其是在分布式缓存环境中。虽然可以通过 Cache.getNativeCache() 获取底层缓存提供商的原生API(例如Hazelcast的 IMap.getAll(:Set)),但这会引入与特定缓存提供商的强耦合,降低代码的可移植性。

灵光
灵光

蚂蚁集团推出的全模态AI助手

下载

2. 实现“部分缓存、部分数据库”查询的自定义方案

鉴于Spring Cache Abstraction的上述局限性,要实现先验证缓存中现有数据,再查询数据库获取缺失数据,并缓存新结果的需求,通常需要手动管理缓存逻辑。以下是一个详细的实现示例:

import org.springframework.cache.Cache;
import org.springframework.cache.CacheManager;
import org.springframework.stereotype.Service;

import java.util.*;
import java.util.stream.Collectors;

@Service
public class StudentService {

    private final StudentRepository studentRepository;
    private final Cache studentsCache; // 直接获取特定缓存实例

    public StudentService(StudentRepository studentRepository, CacheManager cacheManager) {
        this.studentRepository = studentRepository;
        this.studentsCache = cacheManager.getCache("Students"); // 假设缓存名为"Students"
    }

    /**
     * 根据给定的学生ID集合,从缓存或数据库中获取学生信息。
     * 优先从缓存获取,缺失部分再从数据库查询并更新缓存。
     *
     * @param studentIds 待查询的学生ID集合
     * @return 匹配的学生列表
     */
    public List findStudentsByIds(Set studentIds) {
        List result = new ArrayList<>();
        Set idsToQueryDb = new HashSet<>(studentIds); // 存储需要从数据库查询的ID

        // 1. 尝试从缓存中加载学生数据
        // 注意:这里是逐个ID查询缓存,可能存在性能瓶颈
        for (Integer id : studentIds) {
            Cache.ValueWrapper valueWrapper = studentsCache.get(id);
            if (valueWrapper != null) {
                Object cachedObject = valueWrapper.get();
                if (cachedObject instanceof Student) {
                    result.add((Student) cachedObject);
                    idsToQueryDb.remove(id); // 从待查询数据库的ID集合中移除已缓存的ID
                }
            }
        }

        // 2. 查询数据库获取缓存中缺失的学生数据
        if (!idsToQueryDb.isEmpty()) {
            List studentsFromDb = studentRepository.findByIdIn(idsToQueryDb);

            // 3. 将从数据库获取的数据存入缓存,并添加到结果列表
            for (Student student : studentsFromDb) {
                studentsCache.put(student.getId(), student); // 缓存单个学生
                result.add(student);
            }
        }

        // 确保返回的结果只包含请求的ID,并且顺序不固定
        // 如果需要特定顺序,可能需要额外处理,例如按原始 studentIds 排序
        return result.stream()
                .filter(s -> studentIds.contains(s.getId())) // 过滤掉可能存在的意外数据
                .collect(Collectors.toList());
    }

    // 示例:StudentRepository 接口
    public interface StudentRepository {
        List findByIdIn(Set ids);
    }

    // 示例:Student 实体类
    public static class Student {
        private int id;
        private String name;

        public Student(int id, String name) {
            this.id = id;
            this.name = name;
        }

        public int getId() {
            return id;
        }

        public void setId(int id) {
            this.id = id;
        }

        public String getName() {
            return name;
        }

        public void setName(String name) {
            this.name = name;
        }

        @Override
        public boolean equals(Object o) {
            if (this == o) return true;
            if (o == null || getClass() != o.getClass()) return false;
            Student student = (Student) o;
            return id == student.id;
        }

        @Override
        public int hashCode() {
            return Objects.hash(id);
        }
    }
}

2.1 代码解析与注意事项

  1. 手动获取 Cache 实例: 通过 CacheManager 获取特定名称的 Cache 实例 (studentsCache),以便直接进行 get 和 put 操作。
  2. 缓存优先查询:
    • 遍历所有请求的 studentIds。
    • 对每个 id 调用 studentsCache.get(id) 尝试从缓存中获取数据。
    • 如果缓存命中,则将数据添加到 result 列表,并从 idsToQueryDb 集合中移除该 id,表示此数据无需再查询数据库。
  3. 数据库查询:
    • 在完成缓存查询后,idsToQueryDb 集合中将只包含那些缓存中不存在的ID。
    • 对 idsToQueryDb 执行一次数据库批量查询 (studentRepository.findByIdIn(idsToQueryDb)),以获取缺失的数据。
  4. 更新缓存与合并结果:
    • 将从数据库获取的 studentsFromDb 中的每个 Student 对象,通过 studentsCache.put(student.getId(), student) 逐一存入缓存。
    • 将这些新获取的数据也添加到 result 列表中。
  5. 结果返回: 返回合并后的 result 列表。

2.2 性能考量

  • 缓存多次 get 调用: 上述方案中,对每个请求的ID都会进行一次 studentsCache.get(id) 调用。如果 studentIds 集合非常大(例如数百甚至上千个ID),这可能会导致大量的缓存网络往返(对于分布式缓存而言),影响性能。
  • 原生缓存API优化: 如果性能成为瓶颈,并且您不介意与特定缓存提供商耦合,可以考虑使用 studentsCache.getNativeCache() 获取底层缓存的原生API。例如,对于Hazelcast,可以将其转换为 IMap 并使用 IMap.getAll(idsToQuery) 进行批量获取,这将大大减少网络开销。
    // 示例:使用Hazelcast原生API进行批量获取
    // 假设studentsCache的底层实现是HazelcastCache
    if (studentsCache.getNativeCache() instanceof IMap) {
        IMap nativeMap = (IMap) studentsCache.getNativeCache();
        Map cachedStudentsMap = nativeMap.getAll(studentIds); // 批量获取
        // ... 然后处理 cachedStudentsMap
    }

    但请注意,这种方式会牺牲缓存抽象带来的灵活性和可移植性。

3. 总结

Spring Cache Abstraction 的 @Cacheable 注解适用于“方法级别”的整体缓存,即要么整个方法的输入参数对应的结果在缓存中,要么整个方法执行并缓存结果。它不直接支持在方法内部进行细粒度的“部分缓存命中,部分数据库查询”逻辑。

要实现这种复杂需求,开发者需要:

  1. 手动管理缓存: 通过 CacheManager 获取 Cache 实例,并显式调用 get 和 put 方法。
  2. 设计查询逻辑: 先尝试从缓存中逐个获取数据,识别出缺失的键。
  3. 批量数据库查询: 对缺失的键进行一次性数据库批量查询。
  4. 回填缓存: 将从数据库获取的新数据存入缓存,以备后续使用。

在实现过程中,应权衡代码的复杂性、性能需求以及与特定缓存提供商的耦合程度。对于高性能要求的场景,可以考虑利用底层缓存提供商的批量操作API,但需注意可能牺牲的抽象优势。

相关专题

更多
spring框架介绍
spring框架介绍

本专题整合了spring框架相关内容,想了解更多详细内容,请阅读专题下面的文章。

106

2025.08.06

spring boot框架优点
spring boot框架优点

spring boot框架的优点有简化配置、快速开发、内嵌服务器、微服务支持、自动化测试和生态系统支持。本专题为大家提供spring boot相关的文章、下载、课程内容,供大家免费下载体验。

135

2023.09.05

spring框架有哪些
spring框架有哪些

spring框架有Spring Core、Spring MVC、Spring Data、Spring Security、Spring AOP和Spring Boot。详细介绍:1、Spring Core,通过将对象的创建和依赖关系的管理交给容器来实现,从而降低了组件之间的耦合度;2、Spring MVC,提供基于模型-视图-控制器的架构,用于开发灵活和可扩展的Web应用程序等。

389

2023.10.12

Java Spring Boot开发
Java Spring Boot开发

本专题围绕 Java 主流开发框架 Spring Boot 展开,系统讲解依赖注入、配置管理、数据访问、RESTful API、微服务架构与安全认证等核心知识,并通过电商平台、博客系统与企业管理系统等项目实战,帮助学员掌握使用 Spring Boot 快速开发高效、稳定的企业级应用。

68

2025.08.19

Java Spring Boot 4更新教程_Java Spring Boot 4有哪些新特性
Java Spring Boot 4更新教程_Java Spring Boot 4有哪些新特性

Spring Boot 是一个基于 Spring 框架的 Java 开发框架,它通过 约定优于配置的原则,大幅简化了 Spring 应用的初始搭建、配置和开发过程,让开发者可以快速构建独立的、生产级别的 Spring 应用,无需繁琐的样板配置,通常集成嵌入式服务器(如 Tomcat),提供“开箱即用”的体验,是构建微服务和 Web 应用的流行工具。

34

2025.12.22

Java Spring Boot 微服务实战
Java Spring Boot 微服务实战

本专题深入讲解 Java Spring Boot 在微服务架构中的应用,内容涵盖服务注册与发现、REST API开发、配置中心、负载均衡、熔断与限流、日志与监控。通过实际项目案例(如电商订单系统),帮助开发者掌握 从单体应用迁移到高可用微服务系统的完整流程与实战能力。

114

2025.12.24

什么是分布式
什么是分布式

分布式是一种计算和数据处理的方式,将计算任务或数据分散到多个计算机或节点中进行处理。本专题为大家提供分布式相关的文章、下载、课程内容,供大家免费下载体验。

326

2023.08.11

分布式和微服务的区别
分布式和微服务的区别

分布式和微服务的区别在定义和概念、设计思想、粒度和复杂性、服务边界和自治性、技术栈和部署方式等。本专题为大家提供分布式和微服务相关的文章、下载、课程内容,供大家免费下载体验。

233

2023.10.07

Golang 性能分析与pprof调优实战
Golang 性能分析与pprof调优实战

本专题系统讲解 Golang 应用的性能分析与调优方法,重点覆盖 pprof 的使用方式,包括 CPU、内存、阻塞与 goroutine 分析,火焰图解读,常见性能瓶颈定位思路,以及在真实项目中进行针对性优化的实践技巧。通过案例讲解,帮助开发者掌握 用数据驱动的方式持续提升 Go 程序性能与稳定性。

8

2026.01.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 2.8万人学习

C# 教程
C# 教程

共94课时 | 7.3万人学习

Java 教程
Java 教程

共578课时 | 49.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号