PHP查询MySQL大量数据的时候内存占用分析

1、PHP查询 MySQL大量数据的时候内存占用分析文章主要是从原理 , 手册和源码分析在PHP中查询 MySQL返回大量结果时 , 内存占用的问题 , 同时对使用 MySQLCAPI也有涉及 . 跟随去看看吧！昨天 , 有同事在 PHP讨论群里提到 , 他做的一个项目由于 MySQL 查询返回的结果太多 ( 达 10 万条 ), 从而导致 PHP内存不够用 . 所以 , 他问 , 在执行下面的代码遍历返回的 MySQL结果之前 , 数据是否已经在内存中了 ?-复制代码代码如下 :while($row=mysql_fetch_assoc($result)/.当然 , 这种问题有许多优化的方法. 不

2、过 , 就这个问题来讲 , 我首先想到 ,MySQL是经典的 C/S(Client/Server,客户端 / 服务器 ) 模型 ,在遍历结果集之前 , 底层的实现可能已经把所有的数据通过网络 ( 假设使用 TCP/IP) 读到了 Client 的缓冲区 , 也有另一种可能 , 就是数据还在 Server 端的发送缓冲区里 , 并没有传给 Client.在查看 PHP和 MySQL的源码之前 , 我注意到 PHP手册里有两个功能相近的函数 :复制代码代码如下 :mysql_query()mysql_unbuffered_query()两个函数的字面意思和说明证实了我的想法, 前一个函数执行时,

3、会把所有的结果集从 Server 端读到 Client 端的缓冲区中 , 而后一个则没有 , 这就是” unbuffered( 未缓冲 ) ”的意思 .那就是说 , 如果用 mysql_unbuffered_query() 执行了一条返回大量结果集的 SQL语句 , 在遍历结果之前 ,PHP的内存是没有被结果集占用的 . 而用 mysql_query() 来执行同样的语句的话 , 函数返回时 ,PHP的内存占用便会急剧增加, 立即耗光内存 .如果阅读 PHP的相关代码 , 可以看到这两个函数的实现上的异同:复制代码代码如下 :/*protoresourcemysql_query(stringq

4、uery,intlink_identifi er)SendsanSQLquerytoMySQL*/PHP_FUNCTION(mysql_query)php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU,MYSQL_S TORE_RESULT);/*/*protoresourcemysql_unbuffered_query(stringquery,intli nk_identifier)SendsanSQLquerytoMySQL,withoutfetchingandbufferingtheresultrows*/PHP_FUNCTION(mys

5、ql_unbuffered_query)php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU,MYSQL_U SE_RESULT);/*/两个函数都调用了php_mysql_do_query(),只差了第 2 个参数的不同 ,MYSQL_STORE_RESULT和MYSQL_USE_RESULT再看.php_mysql_do_query() 的实现 :复制代码代码如下 :if(use_store=MYSQL_USE_RESULT)mysql_result=mysql_use_result(&mysql->conn);elsemysql_result=mysql_store_result(&mysql->conn);mysql_use_result()和 mysql_store_result()是 MySQL的 CAPI函数 , 这两个 CAPI函数的区别就是后者把结果集从MySQLServer端全部读取到了 Client端, 前者只是读取了结果集的元信息.回到 PHP,使用 mysql_unbuffered_query(),可以避免