DB 添加数据如何实时释放掉内存？

描述：我需要导入大量数据到数据库，通过循环 DB::insert 的方式插入数据，结果执行一段时间就提示内存超出。我检查代码发现。 DB 部分一直没释放内存导致的。
测试：我添加测试内容

Route::get('/test', function () {
    for ($i=0; $i<9; $i++) {
        \Illuminate\Support\Facades\DB::table('test')->insert(['news_uuid'=>1111111]);
        echo "内存：",memory_get_usage(),"\n";
    }
});
返回结果：
内存：14310456
内存：14311040
内存：14311624
内存：14312208
内存：14312792
内存：14313376
内存：14313960
内存：14314544
内存：14315448

发现的确是这个部分一直占用内存。
我尝试释放对象：

Route::get('/test', function () {
  for ($i=0; $i<9; $i++) {
  $db = new \Illuminate\Support\Facades\DB();
  $db::table('test')->insert(['news_uuid'=>1111111]);
 unset($db);
 echo "内存：",memory_get_usage(),"\n";
  }
});
返回结果：
内存：14314752
内存：14315336
内存：14315920
内存：14316504
内存：14317088
内存：14317672
内存：14318256
内存：14318840
内存：14319744

依然没有释放内存，我猜想是否是 DB 在其他地方被引用(依赖注入)了没有触发回收机制。
这种情况如何释放内存？

cxcsz

课程读者 58 声望

暂无个人描述~

2 人点赞

从小程序个人账户申请开始，带你一步步进行开发一个微信小程序，直到提交微信控制台上线发布。

从零开始带你一步步开发一个 Go 博客项目，让你在最短的时间内学会使用 Go 进行编码。项目结构很大程度上参考了 Laravel。

推荐文章：

更多推荐...

博客

工作小锦囊系列——如何实现一个车辆预定功能（下） 13 / 15 |

面试 POPER 的后端开发工程师的离奇经历 35 / 104 |

博客

高效办公小技巧——如何批量处理 SQL 文件？ 19 / 10 |

博客

Redis 实用小技巧——如何实现一个排行榜功能 24 / 17 |

博客

百万级数据导入(hyperf+xlswriter+task+websocket) 19 / 12 |

工作

[求职] 陈大剩的个人简历 15 / 22 |

李铭昕

561 声望 / 作者 @ Hyperf

最佳答案

Route::get('/test', function () {
    $query = \Illuminate\Support\Facades\DB::table('test');
    for ($i=0; $i<9; $i++) {
        $query->insert(['news_uuid'=>1111111]);
        echo "内存：",memory_get_usage(),"\n";
    }
});

这样试试

3年前评论

cxcsz （楼主）

测试了该方式，发现没有效果。内存依然变大，然后查看了源代码,进行多次注释测试发现文件： vendor\laravel\framework\src\Illuminate\Database\Connection.php中的 696 行是导致问题的根源。

    public function logQuery($query, $bindings, $time = null)
    {
        $this->event(new QueryExecuted($query, $bindings, $time, $this)); //内存泄露是应该这行代码导致的

        if ($this->loggingQueries) {
            $this->queryLog[] = compact('query', 'bindings', 'time');
        }
    }

查找了文档发现没有可以关闭该方法的配置。然后有去了github 查找是否有解决办法。因为知道问题出现点。我搜索 logQuery 找到 https://github.com/laravel/framework/issues/30012,里面提到解决方法。在需要的地方添加 DB::getConnection()->unsetEventDispatcher(); 代码。结果添加发现报错，没有该方法。在源代码中搜索 unsetEventDispatcher 发现存在该方法。然后查询类的关系。修改后可以使用，在需要的地方添加

        $query = DB::table('test');
        $query->getConnection()->unsetEventDispatcher();

这样就可以解决该问题。

李铭昕（作者）

你每次执行 table 都会 new 一个 Builder，确实不会这么释放，如果你封装一下，调用方法 insert。应该会回收才对。

cxcsz （楼主）

感谢，我试试

讨论数量: 4

李铭昕

561 声望 / 作者 @ Hyperf

Route::get('/test', function () {
    $query = \Illuminate\Support\Facades\DB::table('test');
    for ($i=0; $i<9; $i++) {
        $query->insert(['news_uuid'=>1111111]);
        echo "内存：",memory_get_usage(),"\n";
    }
});

这样试试

3年前评论

cxcsz （楼主）

测试了该方式，发现没有效果。内存依然变大，然后查看了源代码,进行多次注释测试发现文件： vendor\laravel\framework\src\Illuminate\Database\Connection.php中的 696 行是导致问题的根源。

    public function logQuery($query, $bindings, $time = null)
    {
        $this->event(new QueryExecuted($query, $bindings, $time, $this)); //内存泄露是应该这行代码导致的

        if ($this->loggingQueries) {
            $this->queryLog[] = compact('query', 'bindings', 'time');
        }
    }

查找了文档发现没有可以关闭该方法的配置。然后有去了github 查找是否有解决办法。因为知道问题出现点。我搜索 logQuery 找到 https://github.com/laravel/framework/issues/30012,里面提到解决方法。在需要的地方添加 DB::getConnection()->unsetEventDispatcher(); 代码。结果添加发现报错，没有该方法。在源代码中搜索 unsetEventDispatcher 发现存在该方法。然后查询类的关系。修改后可以使用，在需要的地方添加

        $query = DB::table('test');
        $query->getConnection()->unsetEventDispatcher();

这样就可以解决该问题。

李铭昕（作者）

你每次执行 table 都会 new 一个 Builder，确实不会这么释放，如果你封装一下，调用方法 insert。应该会回收才对。

cxcsz （楼主）

感谢，我试试

j4ckma

课程读者 2 声望

使用 DB::purge()释放掉内存

laravel里面有关数据库连接的方法在vendor/laravel/framework/src/Illuminate/Database/DatabaseManager.php中，disconnect()可以断开PDO连接，reconnect()断开连接后重连，但是这两个方法都是只断开不会释放连接，当再次连接时，直接从 $this->connections数组中取出来。purge()断开连接后，会将他从$this->connections中unset掉，释放内存

参考链接 www.05do.com/blog/content/214

2年前评论

lidongyoo

课程读者 292 声望

$db = null;

3年前评论

cxcsz （楼主）

我unset了，没有效果

风吹过有夏天的味道

课程读者 334 声望 / php小菜鸟 @ myself

   Route::get('/test', function () {
            $data = [];
            for ($i=0; $i<9; $i++) {
                $data[] = ['news_uuid'=>1111111];
            }
            \Illuminate\Support\Facades\DB::table('test')->insert($data);
            unset($data);
        });

3年前评论

cxcsz （楼主）

我的使用场景是大批量的导入，所以会循环插入。实例只是简化的，所以这种方式不适用。

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助

DB 添加数据如何实时释放掉内存？

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

DB 添加数据如何实时释放掉内存？

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

请登录