Redis 缓存与查询优化

⋯

快速回顾

项目 内容
缓存对象 部分业务展示列表与统计、公共选项、ColQwen 查询多向量、近期工作记忆
范围限制 业务缓存仅接收当前全组织授权且符合筛选条件的查询;局部及本人范围回源
Cache Aside 鉴权 → 查缓存 → 未命中查库 → 回填前检查依赖代际和日期
失效方式 业务事务登记持久事件,提交后递增平台引用、组织引用或组织业务代际
并发回填 进程内合并同键读取,按旧代际生成的结果不能回填为新代际
当前事实 权限、业务详情、冲突、审批资格和签名链接直查;列表状态命中后再核对
故障与观测 Redis 故障回源,失效事件保留重试;观察命中、旁路、回源、合并和丢弃

职责与实现概述

资产和任务首页、经营统计、公共选项存在重复读取,ColQwen 也会重复编码相同问题。Redis 缓存符合条件的展示快照、查询多向量和近期工作记忆,减少重复 SQL、聚合和视觉查询编码。

业务读取先解析当前权限,只对全组织授权及允许筛选组合使用缓存。Key 绑定组织、完整筛选、日期和依赖代际;写入在同一事务登记失效事件,提交后递增对应代际,后续请求读取新的缓存空间。回填前检查代际和日期,避免并发旧查询污染新空间。

近期消息以带 MySQL 消息版本的快照缓存,持久偏好保存在 MySQL。业务展示允许短暂延迟,调度、审批、授权和详情在当前事实上判断;缓存命中后的列表还会重新核对版本、人员资格、计量及冲突,动态生成可用动作和链接。

缓存对象与读写流程

为什么引入 Redis?

面试回答

Redis 主要减少重复读取和计算。资产、任务等首页及部分统计会重复执行 SQL 和聚合,机型目录与农业选项访问频繁,相同知识问题还会重复进行 ColQwen 查询编码。符合条件的结果缓存后,后续请求可以复用展示快照或问题编码。

缓存前先检查当前授权,业务执行仍读取当前事实。MySQL 保存业务、权限、消息与偏好,Redis 中的展示结果和近期消息都可以重建;查询向量丢失后重新编码。这样优化查询开销,同时保留权限和状态校验。

实现细节

观测按缓存种类拆开:业务缓存看 SQL 与聚合耗时,ColQwen 缓存看实际编码次数,工作记忆看近期消息加载。缓存命中和执行前复核属于不同环节,不能把少做权限检查计作优化。

具体缓存哪些内容?

面试回答

缓存分三类:业务展示缓存保存部分首页、汇总和公共选项;查询向量缓存保存 ColQwen 查询多向量;工作记忆缓存保存组织、用户、会话范围内的近期规范消息。

业务缓存有明确的资格限制。列表和统计要求当前全组织授权,并符合首页、关键词及日期组合等条件;本人相关、局部范围、搜索和深分页直接查库。权限、详情、资源冲突、待审资格和证据直接查询,消息快照命中也要校验 MySQL 版本与来源。

实现细节

缓存类型 内容与使用条件
业务展示 资产、任务、维保、成本首页,状态数量、部分经营汇总和趋势;各实际读取范围均须为全组织
目录与选项 机型目录首页、品牌、类型、无关键词机型选项、作物与作业类型选项、展示配置
查询向量 ColQwen 的问题多向量;Key 绑定编码版本与查询摘要
工作记忆 近期规范消息的 JSON 快照,包含 MySQL 消息版本,按组织、用户和会话隔离

MySQL 保存手动表达偏好和自动画像,记忆文本编码在 memory.search 按需执行。业务详情、账号授权、冲突、验收待办、签名链接等不进入业务展示缓存。

Cache Aside 是怎样的流程?

面试回答

读取时先完成鉴权并判断缓存资格,再按依赖代际、组织、日期和筛选生成 Key。命中后取出独立快照,未命中就查 MySQL;回填前再次检查代际和日期,确认本次读取仍属于同一缓存空间。

写入时在业务事务内登记缓存失效事件,提交后尝试递增受影响的代际。成功提交后,下一次读取使用新的 Key;Redis 暂时不可用时保留持久事件重试。事务回滚不触发成功变更的失效,提交后的缓存故障也不会把已经成功的业务返回成失败。

实现细节

以费用审核为例:

  1. 事务内锁定并核对费用单、当前权限与状态,写入审核结果、审计和组织业务缓存失效事件。
  2. 事务提交后快速递增该组织业务代际;持久监听器负责完成或重试事件。
  3. 后续列表和汇总组合新的组织业务代际读取,未命中时按已审核记录重新聚合。
  4. 提交前已经开始的旧查询仍属于旧 Key,回填检查发现代际变化时丢弃缓存写入。

展示快照命中后,列表继续核对当前版本、人员资格、计量及资源冲突;不匹配时回源,签名 URL、可用动作和阻断原因每次重新生成。

Key 与过期策略

多租户系统中,缓存 Key 怎么设计?

面试回答

Key 需要包含会影响结果的身份范围、筛选、日期和依赖版本。当前业务缓存只处理全组织授权,局部范围和本人数据直接回源;组织 ID 区分租户,类别和完整筛选区分查询,代际区分数据变化前后的快照。

公共目录依赖平台引用代际,组织选项再依赖组织引用代际,业务展示继续加入组织业务代际。工作记忆单独按组织、用户和会话隔离,查询向量按 ColQwen 编码版本和问题摘要复用。每次请求先解析授权,再决定是否能用对应缓存。

实现细节

对象 Key 依据
业务列表与统计 缓存版本、类别、组织、组合依赖代际、Asia/Shanghai 日期、完整筛选
平台/组织选项 对应引用代际、归属与筛选,组织内容额外依赖平台目录
近期工作记忆 组织、用户、会话的摘要键,值中保留规范消息版本
ColQwen 查询多向量 amms:vec:colqwen: 加编码版本和规范化问题的摘要

业务 Key 的结构为:

amms:read:{readVersion}:{category}:{platform或org:组织ID}:{组合代际}:{日期}:{筛选编码}

组织、代际和权限资格来自后端。筛选编码完整保留条件,避免相同日期下的不同状态列表共用结果。业务缓存资格收窄后,无需为任意成员权限组合创建独立快照。

查询向量缓存为什么要包含模型版本?

面试回答

查询多向量必须与页面索引处在兼容的向量空间,模型、维度或预处理变化都会改变编码含义。因此当前 ColQwen 查询缓存把编码版本和规范化问题一起计算摘要,升级编码契约时形成新的 Key。

缓存的是问题表示,文档新增或替换后仍对当前索引重新检索,并回查修订、发布代次和权限。记忆使用独立的文本 embedding 和集合,不能把 ColQwen 的多向量矩阵当成记忆单向量使用。

实现细节

编码版本覆盖模型、维度及相关处理配置。读取缓存校验矩阵有效性,异常时重新编码;相同问题的在途编码在进程内合并。规范化不移除日期、地区或机型编号等有语义的信息。当前查询向量缓存 TTL 为 24 小时,并限制单值大小。

TTL 怎么设置?

面试回答

当前业务展示 TTL 上限为 30 秒,目录和常用选项为 300 秒,空列表或空页为 5 秒;实际 TTL 在上限的 80% 到 100% 之间抖动,并保证展示快照在中国标准时间次日零点前到期。ColQwen 查询多向量保留 24 小时,工作记忆使用自己的配置和消息数量限制。

TTL 负责容量和旧快照淘汰,数据修改还会递增代际。权限和执行资格每次判断,不能因为快照未过期就沿用旧状态。MySQL 与 Redis 分别提交,短 TTL 也不能视为业务提交后更新可见延迟的严格保证。

实现细节

对象 当前 TTL 策略 配合机制
业务展示 上限 30 秒 事务失效事件、业务代际、当前状态再核对
目录和常用选项 上限 300 秒 平台及组织引用代际
空列表/空页 上限 5 秒 减少新数据被旧空结果遮挡
ColQwen 查询多向量 24 小时 编码版本与单值大小限制
工作记忆 配置化 TTL 与消息上限 MySQL 规范消息版本及证据检查

展示缓存的日期维度和到期边界共同避免跨日统计继续复用昨天的快照。日期窗口仅覆盖明确支持的常用组合,任意期间、搜索及深分页直接回源。

一致性与故障处理

缓存和数据库怎么保持一致?

面试回答

业务事务同时登记失效事件,提交后递增缓存代际;失败事件持久保留并重试。Key 包含依赖代际,数据更新后后续读取进入新的空间。与逐个删除详情、列表 Key 相比,这种方式可以覆盖同一依赖下的多个展示查询。

并发回填还要再检查代际。例如 A 查到旧值后,B 提交审核并递增代际,A 准备回填时发现依赖已变化,就放弃写缓存。展示允许短暂延迟,关键业务写入在事务内重新校验当前事实。

实现细节

三个命名空间分别维护平台引用、组织引用和组织业务代际,读取按依赖组合。快速失效在提交后执行,持久监听器只有递增成功才完成事件;重复递增只使旧缓存进一步失效。

Redis 不可用时查询绕过缓存,持久事件等待恢复。停用后重新启用缓存前,先重放失效积压并切换未使用的新缓存版本;旧空间由 TTL 淘汰。回填复核保护缓存空间,业务占用和幂等仍由数据库锁及事务保证。

Redis 不可用或热点缓存失效怎么办?

面试回答

Redis 读取、写入或代际查询失败时,业务展示回源 MySQL,ColQwen 问题编码重新计算,工作记忆从 MySQL 加载。业务正确性依靠持久事实和当前授权,缓存故障不改变这些判断;失效事件继续保留等待重试。

热点展示 Key 的并发未命中通过进程内 single-flight 合并,一个请求加载,其他请求共享这次结果,并各自解码为独立快照。相同 ColQwen 查询也合并在途编码,模型服务使用自身的有界队列和期限控制计算压力。

实现细节

情况 当前处理
代际或缓存读取失败 绕过展示缓存,查询数据库
回填失败或单值超限 返回已经查到的结果,本次不存缓存
失效递增失败 保留事务内持久事件,后续重试
同 Key 并发未命中 进程内合并加载,完成或失败后移除占位
查询向量缓存故障 在检索总期限内重新调用 Runtime 编码
工作记忆缓存故障或版本不符 按 MySQL 规范消息重建

观测分别记录命中、未命中、因范围或事务旁路、故障回源、合并读取、代际变化丢弃及加载耗时。single-flight 的范围是单进程,同一资源的业务写入继续经过数据库并发控制。

评测与结果

怎么证明缓存带来了查询优化?

面试回答

我会固定数据规模、请求分布和并发条件,对比启用缓存前后的完整请求。业务查询看缓存命中率、数据库查询次数,以及平均耗时和 P95;查询向量缓存看 ColQwen 的实际编码次数;同时检查数据更新后多久能在查询结果中看到。

对照分别记录冷缓存和预热状态,统计重复 SQL、编码调用次数及完整接口耗时,再核对更新可见延迟。业务查询、向量编码和上下文加载分别归因,能够明确缓存节省了哪类开销,以及对应的用户等待变化。

实现细节

指标定义见表。前后请求条件保持一致,预热状态单独记录,查询性能与更新可见延迟共同衡量缓存配置。

指标 观察内容
缓存命中率 是否存在足够的重复访问
数据库查询次数 重复 SQL 和聚合查询是否减少
ColQwen 查询编码实际调用次数 查询向量缓存是否减少重复编码
请求平均耗时、P95 用户等待是否改善
数据更新后的可见延迟 是否出现不可接受的陈旧结果

每组对照记录数据版本、请求总数、并发数、查询重复比例、冷缓存或预热状态,以及命中数、数据库访问数、ColQwen 查询编码调用数、接口平均耗时和 P95。另记录成本单据审核提交时间、详情及统计首次显示新值的时间,并核对成员范围与实际结果,防止将少查数据或错误复用范围当成优化。

易混点与回答检查

缓存资格、身份授权和业务执行条件分别判断;TTL 控制保留时间,依赖代际控制后续读取空间,事务内持久事件负责失效恢复。

复盘手记

搜索笔记

输入关键词,搜索所有主题与问答。