从数据库中加载大量数据的方法
2011-06-24 18:12
281 查看
禁止使用如下方法:
select * from table_name limit $start_pos,$page_size
提倡做法:
select sql_no_cache col1,col2,col3 from table_name where id>$start_pos order by id limit $page_size
默认是每个表都有一个自增的主键id
原因: limit操作在start_pos比较大的时候,会花费很大的精力扫描表记录以找到这个位置
对于那些肯定要实时的从表中获取数据的查询,或者对于那些一天只执行一次的查询,我们都可以指定不进行查询缓存,使用 SQL_NO_CACHE 选项。
对于那些变化不频繁的表,查询操作很固定,我们可以将该查询操作缓存起来,这样每次执行的时候不实际访问表和执行查询,只是从缓存获得结果,可以有效地改善查询的性能,使用 SQL_CACHE 选项。
下面是使用 SQL_NO_CACHE 和 SQL_CACHE 的例子:
mysql> select sql_no_cache id,name from test3 where id > 2 limit 5;
mysql> select sql_cache id,name from test3 where id > 2 limit 1,3;
注意:查询缓存的使用还需要配合相应得服务器参数的设置。
select * from table_name limit $start_pos,$page_size
提倡做法:
select sql_no_cache col1,col2,col3 from table_name where id>$start_pos order by id limit $page_size
默认是每个表都有一个自增的主键id
原因: limit操作在start_pos比较大的时候,会花费很大的精力扫描表记录以找到这个位置
对于那些肯定要实时的从表中获取数据的查询,或者对于那些一天只执行一次的查询,我们都可以指定不进行查询缓存,使用 SQL_NO_CACHE 选项。
对于那些变化不频繁的表,查询操作很固定,我们可以将该查询操作缓存起来,这样每次执行的时候不实际访问表和执行查询,只是从缓存获得结果,可以有效地改善查询的性能,使用 SQL_CACHE 选项。
下面是使用 SQL_NO_CACHE 和 SQL_CACHE 的例子:
mysql> select sql_no_cache id,name from test3 where id > 2 limit 5;
mysql> select sql_cache id,name from test3 where id > 2 limit 1,3;
注意:查询缓存的使用还需要配合相应得服务器参数的设置。
相关文章推荐
- hadoop超时解决办法context.progress()的作用 假设在map()方法中,你有一个从数据库读取大量数据的操作,是用一个循环来完成的,并且,在读完全部的数据之前,你不会有任何的数据输出
- 用数据库访问的方法解决从excel大量导入数据
- TreeView加载数据库数据的三种方法实现三级联动
- 加载大量的xml数据 使用压缩方法解决(当然较小时也可以压缩)
- 加载大量的xml数据 使用压缩方法解决(当然较小时也可以压缩)
- TreeView加载数据库数据的三种方法实现三级联动
- Java+SpringMVC中自实现定时加载更新数据库数据到内存的方法
- 提高超大量数据数据库处理速度的方法-表分区
- 从数据库导出大量数据记录保存到文件的方法和实例
- Java实现从数据库导出大量数据记录并保存到文件的方法(转)
- 关于easyui datagrid 大量数据加载时 出现假死问题的解决方法
- MVC4中AJAX Html页面打开调用后台方法实现动态加载数据库中的数据
- Java实现从数据库导出大量数据记录并保存到文件的方法
- 难点总结:Jquery动态加载数据库中的数据(解答人:郭哲 方式:讲述jquery原理及一些函数的使用方法,学会看帮助文档)
- 如何处理大量数据并发操作(数据库锁机制详解)
- 利用jsp将网页文本框中的数据存储到数据库中(get方法示例)
- 将本地数据根据规则导入到数据库表的几种方法
- 使用select2下拉框ajax加载数据时,编辑赋值的方法
- Oracle 不同用户之间 大量数据转移的方法测试