sql查询not in(5万+以上数据如何写会比较好)

问答 / 357 / 4 / 创建于 2年前 / 更新于 2年前

我目前有个sql是select * from xx_table where xx_id not in (3万+)

xx_id是直接缓存下来的数据，想请问下大神这种sql能生效吗，怎样处理会比较好

原来的处理方法是将数据存到临时表，然后进行子查询；现在这个sql需要改成多线程，所以将xx_id缓存到redis

mysql

chapin

课程读者 12 声望

PHP开发工程师 @ cieo

暂无个人描述~

0 人点赞

我们将带你从零开发一个项目并部署到线上，本课程教授 Web 开发中专业、实用的技能，如 Git 工作流、Laravel Mix 前端工作流等。

从零开发一个电商项目，功能包括电商后台、商品 & SKU 管理、购物车、订单管理、支付宝支付、微信支付、订单退款流程、优惠券等

推荐文章：

更多推荐...

Mysql 的 varchar 字段最大长度真的是 65535 吗？ 34 / 10 |

博客

MySQL 实用小技巧——谁动了我的 MySQL ？ 63 / 18 |

博客

对线面试官：MySQL 事务、锁和MVCC 23 / 4 |

博客

对线面试官：12个MySQL慢查询的原因分析 55 / 8 |

博客

laravel-soar(2.x) - 自动监控输出 SQL 优化建议、辅助 laravel 应用 SQL 优化 34 / 42 |

问答

每天新增8640w数据，怎么存储比较好 21 / 50 |

讨论数量: 4

LiamHao

Laravel 8.x 译者 572 声望

where in 3w+ 肯定要 GG 的。

2年前评论

chapin （楼主）

这种有什么解决方案吗，原来是存表子查询，但是现在需要改成多线程，没办法存表，只能缓存这个ID数据

LiamHao （作者）

@MarcoPolo 改成 join 行么？或者将 3w+的 where in 改为 3w+ 的 where id = ? or where id = ? or … 再或者将 3w+ 拆成 6 条 sql，每个 sql 用 5k 的 where in。

Complicated

他这个还是where not in

jamesZhao

见习助教 20 声望

新增个字段把这些id 打上标识，在通过标识查会不会好点，也能走索引

2年前评论

chapin （楼主）

这个查询语句是多线程运行的，打上标示会影响其他线程查询。

jamesZhao （作者）

@MarcoPolo 那你这个问题请大神，要不就批量

66

课程读者 82 声望 / CTO @ 易拓科技

SELECT *
FROM (
SELECT “xx_id” UNION ALL
SELECT “xx_id” UNION ALL
SELECT “xx_id” UNION ALL
SELECT “xx_id” UNION ALL
SELECT “xx_id” UNION ALL
...
)

试试～～我是这样解决的
或者

whereBetween()

2年前评论

dapaoteshi

课程读者 0 声望

首先SQL这么写会长度过长报错,第二redis有个无序集合

2年前评论

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助

sql查询not in(5万+以上数据如何写会比较好)

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

sql查询not in(5万+以上数据如何写会比较好)

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

请登录