锐客网

  1. 首页 > 睿知 > it技术 > >

这php处理大量数据更快 php处理大批量数据

IT技术绑定

在PHP中怎么解决大量数据处理的问题mysql_query函数查询的方式是查询出全部结果后缓存到内存中，这样就会出现超内存的现象，使用另外一个函数mysql_unbuffered_query可以解决这个问题 ， mysql_unbuffered_query不会缓存结果集，而是查询出来数据后立马对结果集进行操作，也就是便查询边返回，这样就不会出现超出内存的现象 ， 但是使用mysql_unbuffered_query的是时候不能使用 mysql_num_rows() 和 mysql_data_seek() 。并且向 MySQL 发送一条新的 SQL 查询之前 ， 必须提取掉所有未缓存的 SQL 查询所产生的结果行 。例如：
使用缓存结果集的代码：
function selecttest()
{
try {
$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');
【这php处理大量数据更快 php处理大批量数据】//不使用缓存结果集方式
//$pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);
$sth = $pdo-prepare('select * from test');
$sth-execute();
echo '最初占用内存大?。? . memory_get_usage() . "\n";
$i = 0;
while ($result = $sth-fetch(PDO::FETCH_ASSOC)) {
$i += 1;
if ($i10) {
break;
}
sleep(1);
print_r($result);
echo '占用内存大?。? . memory_get_usage() . "\n";
}
} catch (Exception $e) {
echo $e-getMessage();
}
}
执行时将会报超出内存的错误：
Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php on line 56
Call Stack:
0.00051353921. {main}() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:0
0.00051355682. test-selecttest() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:85
0.00501425283. PDOStatement-execute() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:56
将上面代码中的$pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);一行的注释去掉后将不在缓存结果集，这时运行该函数的结果如下：
最初占用内存大?。?44808
Array
(
[id] = 1
[a] = v
[b] = w
[c] = i
)
占用内存大?。?45544
Array
(
[id] = 2
[a] = b
[b] = l
[c] = q
)
占用内存大?。?45544
Array
(
[id] = 3
[a] = m
[b] = p
[c] = h
)
占用内存大?。?45536
Array
(
[id] = 4
[a] = j
[b] = i
[c] = b
)
占用内存大?。?45536
可以看到 ， 这时返回一条数据内存占用非常的?。?也就700多字节 ， 这样就不会出现超出内存的错误了 。
PHP效率问题，上万条数据一次性取出？还是分开取出处理？显示数据还是更新（update）数据，都是先处理一部分数据，完成后再处理下一步数据 更有效率 。
显示数据取出部分数据的方法最常用的是分页方式，分页是仅读取前面的几十页信息，读取数据库是很快的，可以比较一下10条和100条的显示速度 ， 差很远 。
更新（update）数据也不能一次性处理大量数据，那样经常会出现页面死定的情况，可以设置更新一定数据后跳转到下一步再更新一定数据，大多数cms更新数据都是采用这种方式 。
无需显示直接读取表内所有数据生成HTML页面时 ， 不论是取出全部数据直接生成有效率，还是一次取出一部分，分别处理有效率 。
在PHP中怎么解决大量数据处理的问题？许昌鲤鱼IT计算机电脑软件编程培训中心目前主流的编程软件VisualBasic的版本是VisualBasic 6.0专业版 。我们所使用的操作系统是Windows10 。
先把VisualBasic 6.0的安装光盘放入电脑的光盘驱动器中，通常电脑能够自动运行光盘上的安装程序 。在安装VisualBasic之前，最好先详细地阅读一下光盘上的Readme.txt文件，了解安装VisualBasic 6.0需要的一些基本知识，然后单击光盘上的Setup.exe文件，并按照安装程序的提示进行操作 。

推荐阅读


上一篇：石城营销小程序简介如何写，小程序 营销

下一篇：射击游戏id，射击游戏id取名