Codeigniter 处理大文件时允许的内存大小耗尽

我发布此内容是为了防止其他人正在寻找相同的解决方案，因为我刚刚在这个废话上浪费了两天时间。

我有一个 cron 作业，每天使用一个非常大的文件更新数据库一次，使用以下代码：

if (($handle = fopen(dirname(__FILE__) . '/uncompressed', "r")) !== FALSE) 
{
    while (($data = fgets($handle)) !== FALSE) 
    {
        $thisline = json_decode($data, true);
        $this->regen($thisline);
    }
    fclose($handle);
}

这是在仅用于 cron 作业的 Codeigniter 控制器中。 $this->regen 函数运行一系列不同的检查，并将该行的正确信息存储在数据库中。该文件本身是超过 300MB 的 JSON，以换行符分隔。

问题：它只会处理大约 20,000 行，然后整个过程就会耗尽内存。

我花了几个小时来解决这个问题，但没有得到任何明显的结果。我正在使用 fgets，我在正确的位置有 $query->free_result() 。这没有帮助。然后我开始检查大约 100 行的循环，并观察 memory_get_usage() 的输出。我最终将范围缩小到 Codeigniter Active Record 类 - 每次调用该类都会导致内存使用量略有增加。

然后我发现了这个线程埃利斯拉布斯 http://ellislab.com/forums/viewthread/88908/我得到了答案。 CI Active Record 会保存查询，以便您可以在多个函数中构建查询。 （我什至不打算讨论默认打开它是多么愚蠢。）

转到/config/database.php并添加

$db['default']['save_queries'] = FALSE;

到文件末尾。然后确保在单个函数中使用 Active Record 构建和执行查询。如果您只需要在一种情况下将其关闭，请使用

$this->db->save_queries = FALSE;

在构造函数中或任何您需要放置它的地方。