PDO :: fetchAll与PDO ::在循环中获取

Lot*_*tes 69 php mysql pdo fetch

只是一个简单的问题.

在循环中使用PDO :: fetchAll()和PDO :: fetch()之间是否有任何性能差异(对于大型结果集)?

我正在获取用户定义类的对象,如果这有任何区别.

我最初没有受过教育的假设是fetchAll可能更快,因为PDO可以在一个语句中执行多个操作,而mysql_query只能执行一个.但是我对PDO的内部工作知之甚少,而且文档没有说明这一点,以及fetchAll()是否只是一个转储到数组中的PHP端循环.

有帮助吗?

Ark*_*rkh 75

具有200k随机记录的小基准.正如所料,fetchAll方法更快但需要更多内存.

Result :
fetchAll : 0.35965991020203s, 100249408b
fetch : 0.39197015762329s, 440b
Run Code Online (Sandbox Code Playgroud)

使用的基准代码:

<?php
// First benchmark : speed
$dbh = new PDO('mysql:dbname=testage;dbhost=localhost', 'root', '');
$dbh->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXCEPTION);
$sql = 'SELECT * FROM test_table WHERE 1';
$stmt = $dbh->query($sql);
$data = array();
$start_all = microtime(true);
$data = $stmt->fetchAll();
$end_all = microtime(true);

$stmt = $dbh->query($sql);
$data = array();
$start_one = microtime(true);
while($data = $stmt->fetch()){}
$end_one = microtime(true);

// Second benchmark : memory usage
$stmt = $dbh->query($sql);
$data = array();
$memory_start_all = memory_get_usage();
$data = $stmt->fetchAll();
$memory_end_all = memory_get_usage();

$stmt = $dbh->query($sql);
$data = array();
$memory_end_one = 0;
$memory_start_one = memory_get_usage();
while($data = $stmt->fetch()){
  $memory_end_one = max($memory_end_one, memory_get_usage());
}

echo 'Result : <br/>
fetchAll : ' . ($end_all - $start_all) . 's, ' . ($memory_end_all - $memory_start_all) . 'b<br/>
fetch : ' . ($end_one - $start_one) . 's, ' . ($memory_end_one - $memory_start_one) . 'b<br/>';
Run Code Online (Sandbox Code Playgroud)

  • 是的,你没有.这是基准测试的目标:首先是你做一个fetchAll然后做数据的工作.第二个,您将获取一行,在此行上执行工作,然后获取下一行.一个很好的例子是在显示数据表时,是否需要在写入缓冲区之前存储所有数据? (62认同)
  • -1.这绝对是一个*糟糕的*基准.记忆不是真正的记忆.`memory_get_usage(/*true*/)`显示PHP本身分配的内存.它**不会**显示***LIBRARY***分配的内存.Libmysqlclient和mysqlnd正在使用他们自己的*内存.不是PHP的记忆. (3认同)
  • @FélixGagnon-Grenier`memory_get * usage()`仅显示由PHP控制的内存。直接malloc()或mmap()调用将不受此限制。并且可以肯定的是,没有缓冲的查询基本上不是从套接字读取的。这意味着结果将在mysql服务器端进行缓冲。但是,缓冲的查询是客户端存储的……是通过malloc()分配的libmysqlclient的内存。(mysqlnd将使用通过Zend内存分配器分配内存的emalloc())…但是,该基准测试显然是通过libmysqlclient完成的。(因为数字对于mysqlnd来说太不现实了。) (2认同)

Ken*_*ins 10

关于PHP的一件事,我发现它几乎总是真的是你自己实现的函数几乎总是比PHP等效的慢.这是因为当在PHP中实现某些东西时,它没有C所具有的所有编译时优化(编写PHP),并且PHP函数调用的开销很高.

  • 我不确定我是否完全理解你的答案,但我必须在取出后再对所有对象进行一些操作,这无疑需要另一个foreach循环.我是否应该坚持一次获取一个对象并在获取每个对象时对其执行操作? (3认同)

小智 9

@Arkh

// $data in this case is an array of rows;

$data = $stmt->fetchAll();


// $data in this case is just one row after each loop;

while($data = $stmt->fetch()){}


// Try using

$i = 0;

while($data[$i++] = $stmt->fetch()){}
Run Code Online (Sandbox Code Playgroud)

记忆差异应该变得可以忽略不计

  • @stancu顶部和底部变体实际上是相同的,并且使用fetch()看到的额外MEM可能是while()开销的伪像.fetch()的目的是一次处理一行,使用while()来完成与fetchAll(PDO :: FETCH_NUM)相同的事情是愚蠢的,因为你在PDO中发生的C级编译器优化失败了模块. (2认同)

iVa*_*ble 9

测量"内存占用"的所有基准实际上都是不正确的,原因很简单.

默认情况下,PDO会将所有内容加载到内存中,如果使用fetch或fetchAll则无关紧要.要真正获得无缓冲查询的好处,您应该指示PDO使用无缓冲的查询:

$db->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

在这种情况下,您将看到脚本的内存占用量存在巨大差异