标签:query-optimization sql mysql
如何从单个大型表(约7500万行)优化此单个查询?
SELECT
log_id
FROM
score
WHERE
class_id IN (17,395)
ORDER BY date_reverse
LIMIT 10000;
我为一组特定的类提取了最新的10k记录,以便可以快速知道它们在较大的导入脚本中是否已经存在.
我想我已经建立了适当的索引,但是该查询持续5-50秒!
需要帮助请叫我.
EXPLAIN
SELECT
log_id
FROM
score
WHERE
class_id IN (17,395)
ORDER BY date_reverse
LIMIT 10000;
*** row 1 ***
table: score
type: range
possible_keys: class_id,score_multi_2,class_id_date_reverse,score_multi_5
key: class_id_date_reverse
key_len: 4
ref: NULL
rows: 1287726
Extra: Using where; Using index; Using filesort
CREATE TABLE `score` (
`log_id` bigint(20) NOT NULL,
`profile_id` bigint(20) DEFAULT NULL,
`date` datetime DEFAULT NULL,
`class_id` int(11) NOT NULL,
`score` float(10,6) DEFAULT NULL,
`score_date` datetime DEFAULT NULL,
`process_date` datetime DEFAULT NULL,
`status_type_id` int(3) NOT NULL DEFAULT '0',
`date_reverse` int(11) DEFAULT NULL,
UNIQUE KEY `unique_key` (`log_id`,`class_id`),
KEY `class_id` (`class_id`),
KEY `profile_id` (`profile_id`),
KEY `date` (`date`),
KEY `score` (`score`),
KEY `status_type_id` (`status_type_id `),
KEY `status_type_id_date` (`status_type_id`,`date`),
KEY `class_status_type_id_date_log_id` (`class_id`,`status_type_id`,`date`,`log_id`),
KEY `date_reverse` (`date_reverse`),
KEY `class_id_date_reverse` (`class_id`,`date_reverse`),
KEY `date` (`date`),
KEY `class_id_date_reverse_log_id` (`class_id`,`date_reverse`,`log_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;
解决方法:
我的猜测是,运行此查询的最快方法是咬紧牙关,并允许对20,000行进行排序.我想到的查询是:
SELECT *
FROM ((SELECT log_id
FROM score
WHERE class_id = 17
ORDER BY date_reverse
LIMIT 10000
) UNION ALL
(SELECT log_id
FROM score
WHERE class_id = 395
ORDER BY date_reverse
LIMIT 10000
)
) s
ORDER BY date_reverse
LIMIT 10000;
对于此查询,您需要分数(class_id,date_reverse,log_id)上的复合索引.每个子查询都应该非常有效地使用该索引.但是,最终排序将需要使用文件排序.
标签:query-optimization,sql,mysql 来源: https://codeday.me/bug/20191120/2047861.html
本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享; 2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关; 3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关; 4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除; 5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。