优化数千个项目的foreach [英] Optimization of foreach for thousands items

问题描述

我通过一组 25,000 结果运行下面的代码。

  $ oldproducts = Oldproduct：优化，因为我正在达到内存限制。 ：模型（） - >的findAll（）; / *（这里有25,000个结果）* / 
 
 foreach（$ oldproducts as $ oldproduct）：
 $ criteria = new CDbCriteria; 
 $ criteria-> compare（'someid`'，$ oldproduct-> someid）; 
 $ found = Newproduct :: model（） - > findAll（$ criteria）; 
 
 if（empty（$ finds））{
 $ new = new Newproduct; 
 $ new-> someid = $ oldproduct-> someid; 
 $ new-> save（）; 
} else {
 foreach（$ find as $ find）：
 if（$ find-> price！= $ oldproduct-> price）{
 $ find-> ; attributes = array（'price'=> $ oldproduct-> price）; 
 $ find-> save（）; 
} 
 endforeach; 
} 
 endforeach; 
  

代码通过 someid 比较两个表的行。如果它发现巧合，它会更新 price 列，如果不创建新记录。 使用 $ b $ CDataProviderIterator 其中：

...允许迭代大型数据集而不需要将整个集合保存在内存中。

您首先必须将 CDataProvider 实例传递给它：

  $ dataProvider = new CActiveDataProvider（Oldproduct）; 
 $ iterator = new CDataProviderIterator（$ dataProvider）; 
 foreach（$ iterator as $ item）{
 // do stuff 
} 
  

I'm running the code below over a set of 25,000 results. I need to optimize it because i'm hitting the memory limit.

$oldproducts = Oldproduct::model()->findAll(); /*(here i have 25,000 results)*/

foreach($oldproducts as $oldproduct) :
    $criteria = new CDbCriteria;
    $criteria->compare('`someid`', $oldproduct->someid);
    $finds = Newproduct::model()->findAll($criteria);

    if (empty($finds)) {
        $new = new Newproduct;
        $new->someid = $oldproduct->someid;
        $new->save();
    } else {
        foreach($finds as $find) :
            if ($find->price != $oldproduct->price) {
                $find->attributes=array('price' => $oldproduct->price);
                $find->save();
            }
        endforeach;
    }
endforeach;

Code compares rows of two tables by someid. If it find coincidence it updates price column, if not creates a new record.

解决方案

Use CDataProviderIterator which:

... allows iteration over large data sets without holding the entire set in memory.

You first have to pass a CDataProvider instance to it:

$dataProvider = new CActiveDataProvider("Oldproduct");
$iterator = new CDataProviderIterator($dataProvider);
foreach($iterator as $item) {
    // do stuff
}

这篇关于优化数千个项目的foreach的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！