我正在开发一个symfony2应用程序(更具体地说,我正在使用symfony 2.7.1)。
我创建了一个命令来从数据库中获取信息,对其进行详细说明,然后将其传输到新数据库中。
它或多或少是这样的:
// init stuff
$count = 0;
while ( ( $res = mysqli_query($mysqli, "SELECT * FROM mytable LIMIT ".$count*100 .", ".(++$count)*100) ) && (mysqli_num_rows($res) > 0 ) )
{
while ($row = mysqli_fetch_assoc($res))
{
$my_variable_1 = new myClass1();
$my_variable_2 = new myClass2();
$my_variable_3 = new myClass3();
$my_variable_1 -> setFieldA( $my_variable_2 );
$my_variable_1 -> setFieldB( $my_variable_3 );
$my_variable_1 -> setField01 ($row['field_01']);
$my_variable_1 -> setField02 ($row['field_02']);
$my_variable_1 -> setField03 ($row['field_03']);
$my_variable_1 -> setField04 ($row['field_04']);
$my_variable_1 -> setField05 ($row['field_05']);
$my_variable_1 -> setField06 ($row['field_06']);
$my_variable_1 -> setField07 ($row['field_07']);
$my_variable_1 -> setField08 ($row['field_08']);
$my_variable_1 -> setField09 ($row['field_09']);
$my_variable_1 -> setField10 ($row['field_10']);
$my_variable_3 -> setField1 ($row['field_AA']);
$my_variable_3 -> setField2 ($row['field_BB']);
$my_variable_2 -> setField1 ($row['field_XX']);
$my_variable_2 -> setField2 ($row['field_YY']);
$text = "Creating ".$my_variable_1 -> getField1() ;
$output->writeln( $text );
$entityManager->persist($my_variable_1);
$entityManager->persist($my_variable_3);
$entityManager->persist($my_variable_2);
}
$entityManager -> flush();
}
// other loops like this
事实是,我总是内存不足。我有很多类似上面的循环,每个循环的长度都超过10000+。我尝试扩展允许的内存大小,但这只是推迟了问题。
是否有任何好的做法或编码方法可以使内存需求保持较低水平,或释放未使用的内存?
提前致谢。
您的问题很可能在这里出现:
..FROM mytable LIMIT“。$ count * 100。”,“。(++ $ count)* 100)...
MySQLLIMIT
子句接受两个参数。从文档中:
有两个参数,第一个参数指定要返回的第一行的偏移量,第二个参数指定要返回的最大行数。初始行的偏移量是0(不是1):
您的情况是线性的,每次迭代都选择越来越多的记录:100、200、300等。
将该代码行更改为:
..FROM mytable LIMIT ".$count*100 .", "100...
您只需要更改偏移量,第二个参数指示最大条目数应保持不变。这样,每次迭代您最多选择100条记录,并且应该解决您的内存问题。
更新:此外,请确保在每个循环中都拆开水合的实体,以允许GC清理内存。
例子:
$em->detach($entity);
此处更多内容:http : //doctrine-orm.readthedocs.org/en/latest/reference/working-with-objects.html#detaching-entities
本文收集自互联网,转载请注明来源。
如有侵权,请联系 [email protected] 删除。
我来说两句