adb,sql中用 ORDER BY RAND()随机,巨慢, 1.4亿数据量,order by rand() 6条数据,60多秒才出来结果,有什么办法解决吗?
对于ORDER BY排序AnalyticDB MySQL会把数据缓存到内存中。如果需要排序的数据量较大,就会占用较多内存。这个需要提供下相关SQL的查询ID,需要具体分析下慢的原因,此回答整理自钉群“云数据仓库ADB-开发者群”
ORDER BY RAND()随机排序需要对所有数据进行排序,对于数据量大的情况下,性能会受到很大的影响。对于1.4亿数据量的情况,建议使用其他方式进行随机排序,例如:
使用分页查询实现随机:可以在WHERE条件中添加随机雷达,然后使用LIMIT语句分页查询。
对数据表添加索引:在某些情况下,创建索引可以加快排序的速度。例如,根据字段创建索引,然后使用ORDER BY查询,可以有效地提高查询速度。
数据分片:将数据分成多个分片,分别查询,然后合并结果。这种方式可以分散查询压力,提高查询效率。
使用随机函数:一些数据库提供了随机函数,例如MySQL的rand函数、Oracle的dbms_random函数等,可以直接使用这些函数随机查询。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
阿里云自主研发的云原生数据仓库,具有高并发读写、低峰谷读写、弹性扩展、安全可靠等特性,可支持PB级别数据存储,可广泛应用于BI、机器学习、实时分析、数据挖掘等场景。包含AnalyticDB MySQL版、AnalyticDB PostgreSQL 版。