【YashanDB 知识库】in 大量参数时查询性能慢

简介: **标题:in 大量参数时查询性能慢****简介:**在测试表(200万数据量)中,对带有索引的 PHONE 字段执行包含超过300个参数的 IN 查询时,SQL 执行时间过长。通过 explain 发现执行计划走了 FAST FULL SCAN,而非更高效的 INDEX RANGE SCAN。解决方法包括重新收集统计信息或使用 hint 强制走 INDEX RANGE SCAN,优化后查询时间缩短至毫秒级。此问题影响 23.2.8.100 之前的所有版本。**关键字:** in 大量参数, FAST FULL SCAN, INDEX RANGE SCAN

【标题】in 大量参数时查询性能慢

【关键字】in 大量参数 FAST FULL SCAN INDEX RANGE SCAN

【问题描述】测试表数据量 200w,表结构如图,且在 PHONE 字段上创建了索引

1.jpeg

测试 SQL 为:

select name,sum(id) from test1119 where phone in (...) group by name;

且in中的参数大于300个

该 SQL 直接运行时间:

2.jpeg

【问题原因分析】

通过 explain 可以看到执行计划走了 FFS,但是当前 in 大量参数的场景下走 INDEX FAST FULL SCAN 的性能低于走 INDEX RANGE SCAN。

【解决/规避方法】

1、重新收集统计信息,检查收集统计信息后能否自动走上 INDEX RANGE SCAN

2、如果仍然没有走上 INDEX RANGE SCAN,则使用 hint,修改 SQL 为:

3.jpeg

4.jpeg

走 range scan 的时间:毫秒级

5.jpeg

【影响范围】23.2.8.100 之前的所有版本

【修复版本】-

相关文章
|
1月前
|
存储 API 开发者
百宝箱开放平台 ✖️ 查询知识库文件列表
通过调用该接口,开发者可查询指定知识库中的文件列表,支持分页参数设置,需提供Authorization令牌及知识库ID,返回文件信息包括名称、大小等,并附带错误码说明。
115 4
|
1月前
|
API 开发者
百宝箱开放平台 ✖️ 查询知识库文件的构建状态
本接口用于查询目标文件在知识库中的构建状态,需提供documentId并配置有效token。支持查看初始化、处理中、成功、失败等状态,并返回详细错误信息以便排查问题。
101 4
|
1月前
|
存储 API 开发者
蚂蚁开放平台 ✖️ 查询知识库列表
通过调用该接口,开发者可查询租户内知识库列表,支持分页参数配置,需提供有效授权令牌。返回信息包含知识库ID、名称、描述及存储大小等。
103 4
|
7月前
|
SQL 测试技术 数据库
【YashanDB知识库】IMP跨网络导入慢问题
问题现象:290M数据,本地导入2分钟,跨机导入耗时显著增加(最高30分钟)。 原因分析:`imp`逐条SQL通过网络传输至yashanDB执行,交互频繁导致性能下降。 影响版本:客户测试环境22.2.8.3。 解决方法:将导入文件上传至与yashanDB同机后使用`imp`,减少网络延迟。 经验总结:优化`imp`工具,支持直接上传文件至服务器端执行,降低网络依赖。
|
7月前
|
监控 数据库
【YashanDB 知识库】ycm 托管数据库时报错 OM host ip:127.0.0.1 is not support join to YCM
在托管数据库时,若 OM 的 IP 被设置为 127.0.0.1,将导致无法托管至 YCM,并使数据库失去监控。此问题源于安装时修改了 OM 的监听 IP。解决方法包括:将 OM 的 IP 修改为本机实际 IP 或 0.0.0.0,同时更新 env 文件及 yasom 后台数据库中的相关配置。经验总结指出,应避免非必要的后台 IP 修改,且数据库安装需遵循规范,不使用仅限本机访问的 IP(如 127.0.0.1)。
|
7月前
|
监控 网络安全 数据库
YashanDB 知识库:ycm 纳管主机安装 YCM-AGENT 时报错 “任务提交失败,无法连接主机”
在安装 ycm-agent 纳管主机时,可能出现因端口未开放导致的报错问题。此问题会阻止 YCM 对主机和数据库的监控功能,影响版本为 `yashandb-cloud-manager-23.2.1.100-linux-aarch64.tar`。原因是目标主机(如 10.149.223.121)未开放 9070 或 9071 端口。解决方法包括关闭防火墙、添加白名单或开放指定端口,需与管理员确认操作。处理过程涉及网络检查、端口测试等步骤。端口问题解决后,若再次安装报唯一键错误,需先移除失败主机再重试。
|
7月前
|
监控 Java Shell
【YashanDB 知识库】ycm 托管数据库时,数据库非 OM 安装无法托管
本文主要介绍了因数据库未按规范使用 yasboot 安装导致的问题及解决方法。问题表现为无 yasom 和 yasagent 进程,且目录结构缺失,致使 ycm 无法托管与监控。分析发现可能是数据库版本旧或安装不规范引起。解决方法为先生成配置文件,安装 yasom 和 yasagent,再生成并修改托管配置模板,最终通过命令完成托管至 yasom 和 ycm。总结强调了按规范安装数据库的重要性以避免类似问题。
|
8月前
|
SQL 关系型数据库 MySQL
【YashanDB知识库】MySQL field 函数的改写方法
【YashanDB知识库】MySQL field 函数的改写方法
|
8月前
|
数据库
【YashanDB知识库】服务器重启后启动yasom和yasagent进程时有告警
【YashanDB知识库】服务器重启后启动yasom和yasagent进程时有告警
|
8月前
|
SQL 存储 关系型数据库
【YashanDB知识库】共享从 MySQL异常处理CONTINUE HANDLER的改写方法
【YashanDB知识库】共享从 MySQL异常处理CONTINUE HANDLER的改写方法