-
select * from table where id in (上千id) 超时了,in的奇特优化方法
- 网站名称:select * from table where id in (上千id) 超时了,in的奇特优化方法
- 网站分类:技术文章
- 收录时间:2025-07-11 22:50
- 网站地址:
“select * from table where id in (上千id) 超时了,in的奇特优化方法” 网站介绍
有时候sql的优化不一定非得依靠数据库去解决,毕竟传统的数据库是用来管理数据的,性能是有限的,如果能从程序上优化的话是最好的选择。
关于这条sql的优化方法有很多种,我先说下最简单的方式。
select * from table where id in (上千id)
方法一:采用多线程,把id分成多段去执行,然后再组装。
select * from table where id in (1-100);
select * from table where id in (101-200);
以此类推... ...
方法二:完全采用数据库,使用临时表
-- 1. 创建临时表
create temporary table tmp_ids (id BIGINT PRIMARY KEY);
-- 2. 批量插入你要查的 ID
INSERT INTO tmp_ids (id) VALUES (1), (2), ..., (1000);
-- 3. 使用 JOIN 查询
SELECT t.* FROM table t JOIN tmp_ids tmp ON t.id = tmp.id;
temporary 是MySQL的语法,session会话级别,session关闭后临时表自动消失,且是session隔离,相同表明不同session之间不冲突,用着也超级方便。
具体办法就是在查询之前创建临时表,然后把要查询的id放入临时表,在进行join查询。这么做的好处就是可以直接利用索引树进行hash查询,类似于for 循环id。
for (int id :idList){
select t.* FROM table t where t.id=id
}
这种临时表的方式性能会快上很多,优化起来也很简单。
由此衍生出新问题:会产生笛卡尔积吗,什么情况下会产生笛卡尔积?
如果你能想到这里,说明你已经具备多了很深的开发经验了。
这里是不会产生笛卡尔积。首先要明白笛卡尔积指的是数据检索结果,是两张表的所有数据行都可能会组合一次。
通俗来说就是:
A 表的每一行,和 B 表的每一行都配对一次,没有任何过滤或条件。
按着这个意思理解,在进行关联查询的时候就必须要有有效的on条件查询,如下面这两条sql都是是无效的on条件,就会产生笛卡尔积。
SELECT * FROM A, B;
SELECT * FROM A JOIN B ON 1 = 1;
还有一种情况可能是类笛卡尔积,看上去像笛卡尔积,但并不是真正的笛卡尔积,如下面的这条sql,其实已经是有条件了,但是因为可能是匹配的结果是一对多,这个是搜索结果暴增。
SELECT * FROM orders o JOIN customers c ON o.city = c.city;
最后一个问题:索引和笛卡尔积的关系
索引和笛卡尔积没关系。
索引侧重的检索过程,有了索引可以避免全表扫描,提高搜索性能;
笛卡尔积侧重的检索结果,是两张表全部和对方数据匹配一次后的数据集合。
- 最近发表
-
- 字节跳动把Python入门知识点整理成手册了,高清PDF开放下载
- 字节跳动竟然斥巨资开发出《Python知识手册》,高清PDF
- 强烈推荐!238页《python编程从入门到实践》完整版,PDF开放下载
- 强烈推荐!248页《python编程从入门到实践》完整版,PDF开放下载
- 强烈推荐!284页《python编程从入门到实践》完整版,PDF开放下载
- 《Python学习手册(第4版)》PDF开放下载,建议收藏
- 户型图怎么画?简单上手的免费户型图绘制工具
- 电气图模板一键套用,图文并茂一键套用的电气图软件
- 业务流程图、页面流程图、泳道图之间的区别
- 万兴科技:公司已完成推理大模型DeepSeek-R1的适配
- 标签列表
-
- mydisktest_v298 (35)
- sql 日期比较 (33)
- document.appendchild (35)
- 头像打包下载 (35)
- 二调符号库 (23)
- acmecadconverter_8.52绿色版 (25)
- f12019破解 (16)
- 流星蝴蝶剑修改器 (18)
- np++ (17)
- 梦幻诛仙表情包 (36)
- 魔兽模型 (23)
- java面试宝典2019pdf (26)
- beamoff下载 (17)
- disk++ (30)
- vncviewer破解版 (20)
- word文档批量处理大师破解版 (19)
- pk10牛牛 (20)
- 加密与解密第四版pdf (29)
- iteye (26)
- parsevideo (22)
- ckeditor4中文文档 (20)
- centos7.4下载 (32)
- cuda10.1下载 (22)
- intouch2014r2sp1永久授权 (33)
- usb2.0-serial驱动下载 (24)