前言
本文主要介绍了关于PHP利用PDO从MysqL读取大量数据处理的相关内容,分享出来供大家参考学习,下面话不多说了,来一起看看详细的介绍吧。
环境
适用场景
需要处理一定数据集业务
pdo 关键设置
setAttribute(\PDO::MysqL_ATTR_USE_BUFFERED_QUERY,false);
//perpare里的游标属性不是必须的
$sth = $dbh->prepare("SELECT * FROM `order`",array(\PDO::ATTR_CURSOR => \PDO::CURSOR_SCROLL));
$sth->execute();
生成器
生成器,迭代数据操作
本生成器可省略
尝试代码
setAttribute(\PDO::MysqL_ATTR_USE_BUFFERED_QUERY,false);
$sth = $dbh->prepare("SELECT * FROM `order`");
$sth->execute();
$i = 0;
$newLine = PHP_SAPI == 'cli' ? "\n" : '
';
foreach ($this->cursor($sth) as $row) {
// var_dump($row);
echo $row['id'] . $newLine;
$i++;
}
echo "消耗内存:" . (memory_get_usage() / 1024 / 1024) . "M" . $newLine;
echo "处理数据行数:" . $i . $newLine;
echo "success";
}
public function cursor($sth)
{
while($row = $sth->fetch(\PDO::FETCH_ASSOC)) {
yield $row;
}
}
}
输出
rush:xhtml;">
1
... //省略部分id
804288
消耗内存:"0.34918212890625M
处理数据行数:254062
success
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对编程之家的支持。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。