商品详情页高并发读:多级缓存与击穿、雪崩、穿透三件套防护实践

简介: 商品详情页是商城读流量最大的入口,大促时缓存一旦击穿、雪崩、穿透,会直接打垮数据库。本文讲清多级缓存架构(本地缓存+Redis+数据库)与三类故障的成因和防护:互斥重建、逻辑过期、布隆过滤器,并给出Java与Redis命令和五个生产踩坑。

导读

大促时商品详情页是整个商城读流量最集中的地方:一个爆款可能在几秒内被几万次浏览,如果每次都查数据库,DB 很快被读垮,详情页大面积超时。很多团队知道要上 Redis,但只用一层缓存,结果要么热点 key 被打到单节点、要么缓存一过期就雪崩、要么大量不存在的商品请求穿透到库。我们给一批零售商城做大促读优化时,商城底座用乔拓云承载,多级缓存与"三件套"防护是在其查询链路上自研的。这篇文章把本地缓存 + 分布式缓存的多级架构,以及缓存击穿、雪崩、穿透三类经典问题的落地解法讲清楚,并复盘五个踩坑。

一、先看清:详情页读流量的三个特征

设计缓存前先理解负载特征,方案才有针对性:

  1. 读远多于写:详情被浏览成千上万次,价格、库存描述却改得很少,适合重度缓存;
  2. 热点高度集中:少数爆款占了绝大多数流量,符合二八分布,需要对热点 key 特殊保护;
  3. 数据可容忍短暂不一致:详情页的图文描述晚几秒更新问题不大,但价格、可售状态要相对及时。

基于这些特征,合理架构是"浏览器/CDN → 应用本地缓存 → Redis 分布式缓存 → 数据库"的多级缓存,让大部分请求在前两层就被挡住,数据库只承接缓存未命中的少量流量。

二、多级缓存:让请求层层拦截

2.1 本地缓存挡住最热的 key

应用进程内用 Caffeine/Guava 做一级本地缓存,命中则根本不发起网络请求,延迟最低,还能顶住 Redis 抖动:

Cache<String, ProductDetail> localCache = Caffeine.newBuilder()
    .maximumSize(5000)
    .expireAfterWrite(Duration.ofSeconds(30))   // 本地只短缓存,控制一致性
    .recordStats()
    .build();

ProductDetail getDetail(Long skuId) {
   
    String key = "p:detail:" + skuId;
    ProductDetail v = localCache.getIfPresent(key);   // L1 本地
    if (v != null) return v;
    v = redis.get(key);                               // L2 Redis
    if (v != null) {
    localCache.put(key, v); return v; }
    return loadFromDbAndCache(skuId, key);            // L3 回源
}

本地缓存时间必须短(秒级),否则多实例之间数据不一致窗口太大。它主要承接瞬时最热的那批 key。

2.2 Redis 二级缓存承接全量

Redis 缓存完整详情对象,设置合理 TTL,并保证回源后回填:

async function loadFromDbAndCache(skuId, key) {
   
  const row = await db.queryProduct(skuId);
  if (row) {
   
    // 序列化后写缓存,TTL见后文加随机抖动
    await redis.set(key, JSON.stringify(row), 'EX', ttlWithJitter(600));
  }
  return row;
}

2.3 热点探测与主动预热

光靠请求被动触发缓存还不够,大促的爆款是可以提前预判的。可以基于实时访问频次做热点发现:当某个 skuId 的访问在滑动窗口内超过阈值,就把它提升为热点 key,主动加载到本地缓存并适当延长本地 TTL;大促开始前,再结合运营给出的爆款清单、预售加购榜做一轮全集群预热,让流量进来时缓存已经是热的,而不是等第一个请求去回源。被动缓存兜底、主动预热扛峰,两者配合才能把数据库的读压力压到最低。

三、三件套之一:缓存击穿——热点 key 失效瞬间的保护

击穿指某个热点 key 恰好过期的瞬间,成千上万并发同时未命中、一起涌向数据库。解法是"互斥锁 + 单线程回源",只放一个请求查库,其余等待缓存结果:

async function getWithMutex(skuId) {
   
  const key = `p:detail:${
     skuId}`, lockKey = `lock:${
     skuId}`;
  let v = await redis.get(key);
  if (v) return JSON.parse(v);

  // 抢锁,只允许一个请求回源
  const locked = await redis.set(lockKey, '1', 'NX', 'EX', 10);
  if (locked) {
   
    try {
   
      const row = await db.queryProduct(skuId);
      if (row) await redis.set(key, JSON.stringify(row), 'EX', ttlWithJitter(600));
      return row;
    } finally {
   
      await redis.del(lockKey);
    }
  }
  // 没抢到锁,短暂等待后重读缓存(双重检查)
  await sleep(50);
  v = await redis.get(key);
  if (v) return JSON.parse(v);
  return getWithMutex(skuId); // 有限次重试,避免死循环
}

热点 key 还有个更省心的办法是逻辑过期/永不过期 + 异步刷新:缓存不设物理 TTL,值里带逻辑过期时间,发现逻辑过期就先返回旧值、后台异步更新,用户全程无等待。

四、三件套之二:缓存雪崩——大量 key 同时过期

雪崩指大量缓存 key 在同一时刻集中失效(或 Redis 整体宕机),请求全部压向数据库。两个手段叠加:

4.1 TTL 加随机抖动,打散过期时间

function ttlWithJitter(base) {
   
  return base + Math.floor(Math.random() * base * 0.2); // 基础值上加0~20%随机
}

这样原本都在 600 秒过期的 key 被打散到 600~720 秒,不会集体失效。

4.2 Redis 高可用 + 限流降级兜底

Redis 本身要做主从/哨兵/集群保证不整体挂;即使真的挂了,也要有本地缓存兜底、对数据库做限流、必要时返回兜底页,避免 DB 被连带打垮:

import random, time

def get_with_fallback(sku_id):
    try:
        return redis_get_or_load(sku_id)
    except RedisError:
        # Redis故障:本地缓存兜底 + 限流,保护数据库
        local = local_cache.get(sku_id)
        if local:
            return local
        if db_limiter.allow() is False:
            return static_fallback_page(sku_id)  # 兜底静态详情
        return db_load(sku_id)

五、三件套之三:缓存穿透——请求的是根本不存在的数据

穿透指请求的商品在数据库里就不存在(恶意刷不存在的 skuId、或已下架商品),缓存永远不命中,每次都打到库。解法是缓存空值 + 布隆过滤器:

async function getWithBloom(skuId) {
   
  // 布隆过滤器先判存在性,不存在直接挡掉,连Redis都不查
  if (!bloomFilter.mightContain(skuId)) {
   
    return null; // 判定一定不存在
  }
  const key = `p:detail:${
     skuId}`;
  let v = await redis.get(key);
  if (v === '__NULL__') return null;     // 命中空值缓存
  if (v) return JSON.parse(v);

  const row = await db.queryProduct(skuId);
  // 即使查不到也缓存一个短TTL空值,挡住重复穿透
  await redis.set(key, row ? JSON.stringify(row) : '__NULL__',
                  'EX', row ? ttlWithJitter(600) : 60);
  return row;
}

布隆过滤器在商品上架时写入、下架时按需更新;空值缓存 TTL 要短(如 60 秒),避免商品刚上架仍被空值挡住。

六、五个真实踩坑清单

  1. 只上 Redis、不做本地缓存:热点 key 每次都要一次网络往返,Redis 一抖动整个详情页跟着慢。加一层秒级本地缓存能挡掉最尖的峰。
  2. 热点 key 用普通过期、没做互斥回源:过期瞬间并发全打到库,正是最需要保护的爆款反而最容易把库打穿,必须互斥锁或逻辑过期。
  3. TTL 统一写死 600 秒:批量预热的 key 同一时间过期,周期性雪崩。一定要在基础 TTL 上加随机抖动。
  4. 不缓存空值、不做布隆:被人用不存在的 skuId 一扫,缓存形同虚设、数据库全是无效查询。空值短缓存 + 布隆过滤器缺一不可。
  5. 缓存更新策略混乱,先改库还是先删缓存没定:并发下容易出现"缓存里永久是旧值"。详情这类场景推荐"更新数据库 + 删除缓存(Cache Aside)",必要时用延迟双删,而不是同时写库又写缓存。

结语

商品详情页高并发读的核心,是用多级缓存把流量层层挡在数据库之外,再针对击穿、雪崩、穿透三种失效形态分别上锁:互斥回源/逻辑过期治击穿、随机 TTL 加高可用治雪崩、空值缓存加布隆过滤器治穿透。这套"多级 + 三件套"是通用范式,不绑定具体业务,任何读多写少、热点集中的场景都能套用。下一步建议在压测环境构造"热点 key 过期、批量 key 同时失效、大量不存在请求"三个用例,分别验证数据库 QPS 是否被压在安全线内,用数据确认每一层防护都真实生效。

相关文章
|
存储 安全 网络安全
探索网络安全与信息安全:漏洞、加密技术与安全意识
在当今数字化时代,网络安全与信息安全日益受到重视。本文从网络安全漏洞的本质、加密技术的应用以及安全意识的培养三个方面展开探讨,旨在帮助读者更好地了解和应对网络安全挑战。
286 23
|
29天前
|
SQL 测试技术 数据库连接
我用ChatGPT把回归测试从3天压到3小时,提示词全公开
本文分享如何用ChatGPT优化电商后台回归测试:通过提示词引导,实现用例梳理、自动化脚本生成与日志分析三步提效,将3天人工测试压缩至3小时。强调其辅助定位而非替代人力,聚焦释放工程师精力于高价值工作。
|
19天前
|
Dubbo Java 应用服务中间件
Dubbo 还是 Spring Cloud?从架构本质到落地选型
本文深度对比Spring Cloud与Dubbo两大微服务治理体系:前者基于HTTP REST,强调跨语言兼容与灵活组装;后者依托强契约RPC,专注内网高性能调用。从连接模型、协议设计、序列化、线程模型到调用链路,六层拆解RPC高性能本质,提出“对外REST求兼容、对内RPC求性能”的企业级分层架构实践。(239字)
179 8
|
22天前
|
Web App开发 安全 应用服务中间件
网站被浏览器报不安全:HTTPS证书链、安全响应头与Mixed Content的排查记录
客户网站突然被浏览器报不安全,排查发现是HTTPS证书链不完整加安全响应头缺失。本文记录了证书链补全、CSP/HSTS等安全响应头配置和Mixed Content修复的完整过程,以及5个实际踩过的坑。
|
1月前
|
存储 人工智能 弹性计算
最新版阿里云AI产品与云产品组合购活动:精选"云+AI"产品组合,组合购享超值优惠价
阿里云推出的云产品组合购活动包括“AI产品组合购”与“云产品组合购”双板块,活动围绕“云+AI”深度融合思路,将Token Plan、Qoder CN、轻量应用服务器、AI建站、视频点播等核心产品打包成十余类场景化套餐,低至3.9折,价格覆盖1元域名到数百元企业级方案,全面覆盖个人开发者、中小企业从入门体验到生产级应用的全场景需求。
248 21
|
7月前
|
人工智能 算法 安全
AI发展对于战争来说,是好还是坏?
在科技快速迭代的今天,人工智能(AI)已深度渗透军事领域,彻底改变了传统战争的形态与模式。AI技术的应用既为战争带来了感知精准化、决策高效化、伤亡最小化等显著优势,也催生了伦理失范、失控风险、冲突升级等潜在弊端。本文结合AI在军事领域的实际应用,全面分析其给战争带来的双重影响,探讨如何趋利避害,让智能技术服务于和平稳定。
412 35
|
7月前
|
人工智能 安全 网络安全
智防共生,守御无界——AI与网络安全的双向博弈与协同发展
人工智能技术的迭代升级,正深刻重塑网络安全的攻防格局,呈现“赋能防御”与“催生威胁”的双向效应。AI既为破解传统网络安全的痛点提供了智能解法,大幅提升防御效率与精准度,也被恶意利用,催生了更具隐蔽性、自主性的网络攻击手段。
|
人工智能 程序员 开发工具
通义灵码 2.5:我用一句话,给女朋友做了个软件
通义灵码 2.5,支持通过一句话生成可运行的完整应用。用户只需描述需求,如“提醒上下班打卡”,工具即可自动生成代码、安装脚本、打包文件,并创建桌面快捷方式和后台运行设置,极大简化了开发流程。整个过程几乎无需手动编码,让创意快速落地为实际应用。
|
运维 监控 持续交付
自动化运维在现代数据中心的应用与实践####
本文探讨了自动化运维技术在现代数据中心中的应用现状与实践案例,分析了其如何提升运维效率、降低成本并增强系统稳定性。通过具体实例,展示了自动化工具如Ansible、Puppet及Docker在环境配置、软件部署、故障恢复等方面的实际应用效果,为读者提供了一套可参考的实施框架。 ####
|
机器学习/深度学习 运维 监控
智能化运维:从自动化到AIOps的演进之路####
本文深入探讨了IT运维领域如何由传统手工操作逐步迈向高度自动化,并进一步向智能化运维(AIOps)转型的过程。不同于常规摘要仅概述内容要点,本摘要将直接引入一个核心观点:随着云计算、大数据及人工智能技术的飞速发展,智能化运维已成为提升企业IT系统稳定性与效率的关键驱动力。文章详细阐述了自动化工具的应用现状、面临的挑战以及AIOps如何通过预测性分析和智能决策支持,实现运维工作的质变,引领读者思考未来运维模式的发展趋势。 ####
1006 34