Php 大型数据集:使用innodb的mysql\u无缓冲\u查询?
基本上,我需要在大数据集上操作,所以我开始考虑可以使用mysql_unbuffered_查询来不将所有结果加载到RAM中 但我读到,当我获取行时,我不能在同一个表上运行任何其他查询。如果表是innodb,我想知道这仍然是真的吗 Innodb在执行mysql\u无缓冲\u查询时是否使用行级锁定 伪代码是:Php 大型数据集:使用innodb的mysql\u无缓冲\u查询?,php,mysql,innodb,myisam,Php,Mysql,Innodb,Myisam,基本上,我需要在大数据集上操作,所以我开始考虑可以使用mysql_unbuffered_查询来不将所有结果加载到RAM中 但我读到,当我获取行时,我不能在同一个表上运行任何其他查询。如果表是innodb,我想知道这仍然是真的吗 Innodb在执行mysql\u无缓冲\u查询时是否使用行级锁定 伪代码是: $q = mysql_unbuffered_query("SELECT * FROM largeTable"); while($r = fetch($q)) { if (some condit
$q = mysql_unbuffered_query("SELECT * FROM largeTable");
while($r = fetch($q)) {
if (some condition)
mysql_query("UPDATE largeTable SET field = somevalue WHERE id = someid");
}
无法运行另一个查询的原因是查询的结果没有预取,并且您正在处理游标。不过,您可以打开另一个连接来处理其他查询 请记住,MySQL中有几个设置,影响执行查询后连接保持打开的时间。如果数据集很大,服务器可以在处理查询之前关闭连接(请参阅等待超时和净写入超时) 好的替代方法是在循环中执行查询,限制行数,并使用
WHERE pk>value ORDER BY pk ASC
,其中pk
是主键,value
是从上一个查询中检索到的最后一个值(就好像您只实现了limit,offset一样,在较大的偏移量下性能会降低)