问题:头几万条读取很快,但是速度呈线性下降 , 同时 mysql server cpu 99%,速度不可接受 。
调用 explain select * from mytable where index_col = xxx limit offset, limit;
显示 type = ALL
在 MySQL optimization 的文档写到"All"的解释
A full table scan is done for each combination of rows from the previous tables. This is normally not good if the table is the first table not marked const, and usually very bad in all other cases. Normally, you can avoid ALL by adding indexes that allow row retrieval from the table based on constant values or column values from earlier tables.
看样子对于 all, mysql 就使用比较笨的方法,那就改用 range 方式? 因为 id 是递增的,也很好修改 sql。
select * from mytable where idoffset and idoffset + limit and index_col = xxx
explain 显示 type = range,结果速度非常理想,返回结果快了几十倍 。
Limit语法:
SELECT * FROM table LIMIT [offset,] rows | rows OFFSET offset
LIMIT子句可以被用于强制 SELECT 语句返回指定的记录数 。LIMIT接受一个或两个数字参数 。参数必须是一个整数常量 。
如果给定两个参数,第一个参数指定第一个返回记录行的偏移量,第二个参数指定返回记录行的最大数目 。初始记录行的偏移量是 0(而不是 1) 。
为了与 PostgreSQL 兼容 , MySQL 也支持句法:LIMIT # OFFSET # 。
mysql SELECT * FROM table LIMIT 5,10; //检索记录行6-15
//为了检索从某一个偏移量到记录集的结束所有的记录行,可以指定第二个参数为-1
mysql SELECT * FROM table LIMIT 95,-1; //检索记录行96-last
//如果只给定一个参数 , 它表示返回最大的记录行数目,换句话说,LIMIT n 等价于 LIMIT 0,n
mysql SELECT * FROM table LIMIT 5; //检索前5个记录行
MySQL的limit给分页带来了极大的方便,但数据量一大的时候 , limit的性能就急剧下降 。同样是取10条数据,下面两句就不是一个数量级别的 。
select * from table limit 10000,10
select * from table limit 0,10
文中不是直接使用limit,而是首先获取到offset的id然后直接使用limit size来获取数据 。根据他的数据,明显要好于直接使用limit 。
这里我具体使用数据分两种情况进行测试 。
1、offset比较小的时候:
select * from table limit 10,10
//多次运行,时间保持在0.0004-0.0005之间
Select * From table Where vid >=(Select vid From table Order By vid limit 10,1) limit 10
//多次运行 , 时间保持在0.0005-0.0006之间,主要是0.0006
结论:偏移offset较小的时候,直接使用limit较优 。这个显然是子查询的原因 。
2、offset大的时候:
select * from table limit 10000,10
//多次运行,时间保持在0.0187左右
Select * From table Where vid >=(Select vid From table Order By vid limit 10000,1) limit 10
//多次运行,时间保持在0.0061左右,只有前者的1/3 。可以预计offset越大 , 后者越优 。
如何调节mysql的性能达到最优为查询缓存优化你mysql怎么提高性能的查询 2. EXPLAIN 你的 SELECT 查询
3. 当只要一行数据时使用 LIMIT 1
4. 为搜索字段建索引 5. 在Join表的时候使用相当类型的例mysql怎么提高性能 , 并将其索引 6. 千万不要 ORDER BY RAND()
7. 避免 SELECT *
8. 永远为每张表设置一个ID 9. 使用 ENUM 而不是 VARCHAR 10. 从 PROCEDURE ANALYSE() 取得建议 11. 尽可能的使用 NOT NULL 12. Prepared Statements 13. 无缓冲的查询
14. 把IP地址存成 UNSIGNED INT 15. 固定长度的表会更快 16. 垂直分割 17. 拆分大的 DELETE 或 INSERT 语句
18. 越小的列会越快 19. 选择正确的存储引擎 20. 使用一个对象关系映射器(Object Relational Mapper) 21. 小心“永久链接”
推荐阅读
- sqlserver取字符串后几位相同的的简单介绍
- 微信视频号的礼物怎么查看,微信视频号的礼物怎么查看谁送的
- 隐藏分区怎么按硬盘分区,隐藏的硬盘分区
- 怎么用代理ip上网设置,如何设置代理ip地址
- python如何使程序发生,python如何运行程序
- 商城小程序技术开发公司,小程序商城开发平台
- 电脑免费模拟竞速跑车游戏,电脑模拟赛车
- python函数内建函数 python如何建立函数
- jquery使用什么获取dom对象,jquery如何获取dom对象