标签：... SQL 千万级 查询 ConditionX 条件 table 优化

背景

某表内包含千万条记录, 现需要按照多条件进行筛选, SQL如下

SELECT * FROM t_table WHERE 1 = 1
AND Condition1
AND Condition2
AND Condition3
AND Condition4
AND Condition5
AND Condition6
...
AND ConditionN
ORDER BY ...
DESC ...
LIMIT ..., ...;

其中每个条件ConditionX又是表中字段的操作集合.
如果按照普通查询方式, 必然造成慢SQL.

对策

上述SQL等价于

SELECT * FROM t_table WHERE 1 = 1
AND !(!Condition1)
AND !(!Condition2)
AND !(!Condition3)
AND !(!Condition4)
AND !(!Condition5)
AND !(!Condition6)
...
AND !(!ConditionN)
ORDER BY ...
DESC ...
LIMIT ..., ...;

即要求所有反条件!ConditionX都为假, 也即某条记录只要任一!ConditionX为真, 就不包含在结果集里.

因此考虑分表, 维护一张新表t_table_condition, 包含原表t_table的主键和其反条件值!ConditionX, 查询时只需从新表里查!ConditionX<>0即可.

这样好处在于将单次复杂query的耗时均摊到每次insert里.

拓展

新表t_table_condition的反条件值!ConditionX应该表示多种状态的可能组合, 为了节省空间, 使用二进制压缩的思想, 如!ConditionX = 1010表示此记录的第二种和第四种条件组合为假

标签：...,SQL,千万级,查询,ConditionX,条件,table,优化
来源： https://www.cnblogs.com/rellik96/p/16596834.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。