symfony2:命令内存不足

阿尔贝托

我正在开发一个symfony2应用程序(更具体地说,我正在使用symfony 2.7.1)。

我创建了一个命令来从数据库中获取信息,对其进行详细说明,然后将其传输到新数据库中。

它或多或少是这样的:

  // init stuff
    $count = 0;

    while ( ( $res = mysqli_query($mysqli, "SELECT * FROM mytable LIMIT ".$count*100 .", ".(++$count)*100) ) && (mysqli_num_rows($res) > 0 ) )
    {

        while ($row = mysqli_fetch_assoc($res))
        {
            $my_variable_1 = new myClass1();
            $my_variable_2 = new myClass2();
            $my_variable_3 = new myClass3();

            $my_variable_1 -> setFieldA( $my_variable_2 );
            $my_variable_1 -> setFieldB( $my_variable_3 );

            $my_variable_1 -> setField01               ($row['field_01']);
            $my_variable_1 -> setField02               ($row['field_02']);
            $my_variable_1 -> setField03               ($row['field_03']);
            $my_variable_1 -> setField04               ($row['field_04']);
            $my_variable_1 -> setField05               ($row['field_05']);
            $my_variable_1 -> setField06               ($row['field_06']);
            $my_variable_1 -> setField07               ($row['field_07']);
            $my_variable_1 -> setField08               ($row['field_08']);
            $my_variable_1 -> setField09               ($row['field_09']);
            $my_variable_1 -> setField10               ($row['field_10']);

            $my_variable_3 -> setField1                ($row['field_AA']);
            $my_variable_3 -> setField2                ($row['field_BB']);

            $my_variable_2 -> setField1                ($row['field_XX']);
            $my_variable_2 -> setField2                ($row['field_YY']);

            $text = "Creating ".$my_variable_1 -> getField1() ;
            $output->writeln( $text );

              $entityManager->persist($my_variable_1);
              $entityManager->persist($my_variable_3);
              $entityManager->persist($my_variable_2);
          }

          $entityManager -> flush();

    }
  // other loops like this

事实是,我总是内存不足。我有很多类似上面的循环,每个循环的长度都超过10000+。我尝试扩展允许的内存大小,但这只是推迟了问题。

是否有任何好的做法或编码方法可以使内存需求保持较低水平,或释放未使用的内存?

提前致谢。

标记

您的问题很可能在这里出现:

..FROM mytable LIMIT“。$ count * 100。”,“。(++ $ count)* 100)...

MySQLLIMIT子句接受两个参数。从文档中:

有两个参数,第一个参数指定要返回的第一行的偏移量,第二个参数指定要返回的最大行数。初始行的偏移量是0(不是1):

您的情况是线性的,每次迭代都选择越来越多的记录:100、200、300等。

将该代码行更改为:

..FROM mytable LIMIT ".$count*100 .", "100...

您只需要更改偏移量,第二个参数指示最大条目数应保持不变。这样,每次迭代您最多选择100条记录,并且应该解决您的内存问题。

更新:此外,请确保在每个循环中都拆开水合的实体,以允许GC清理内存。

例子:

$em->detach($entity);

此处更多内容:http : //doctrine-orm.readthedocs.org/en/latest/reference/working-with-objects.html#detaching-entities

本文收集自互联网,转载请注明来源。

如有侵权,请联系 [email protected] 删除。

编辑于
0

我来说两句

0 条评论
登录 后参与评论

相关文章