一.內(nèi)存溢出解決方案
在做數(shù)據(jù)統(tǒng)計分析時,經(jīng)常會遇到大數(shù)組,可能會發(fā)生內(nèi)存溢出,這里分享一下我的解決方案。還是用例子來說明這個問題,如下:
假定日志中存放的記錄數(shù)為500000條,那么解決方案如下:
ini_set(‘memory_limit','64M'); //重置php可以使用的內(nèi)存大小為64M,一般在遠程主機上是不能修改php.ini文件的,只能通過程序設置。注:在safe_mode(安全模式)下,ini_set失效
set_time_limit(600);//設置超時限制為6分鐘
$farr = $Uarr = $Marr = $IParr = $data = $_sub = array();
$spt = ”$@#!$”;
$root = ”/Data/webapps/VisitLog”;
$path = $dpath = $fpath = NULL;
$path = $root.”/”.date(“Y-m”,$timestamp);
$dpath = $path.”/”.date(“m-d”,$timestamp);
for($j=0;$j<24;$j++){
$v = ($j < 10) ? ”0″.$j : $j;
$gpath = $dpath.”/”.$v.”.php”;
if(!file_exists($gpath)){
continue;
} else {
$arr = file($gpath);////將文件讀入數(shù)組中
array_shift($arr);//移出第一個單元-》<?php exit;?>
$farr = array_merge($farr,$arr);
unset($arr);
}
}
if(empty($this->farr)){
echo ”<p><center>沒有相關記錄!</center></p>”;
exit;
}
while(!empty($farr)){
$_sub = array_splice($farr, 0, 10000); //每次取出$farr中1000個
for($i=0,$scount=count($_sub);$i<$scount;$i++){
$arr = explode($spt,$_sub[$i]);
$Uarr[] = $arr[1]; //vurl
$Marr[] = $arr[2]; //vmark
$IParr[] = $arr[3].” |$nbsp;”.$arr[1]; //IP
}
unset($_sub);//用完及時銷毀
}
unset($farr);
這里,不難看出,一方面,我們要增加PHP可用內(nèi)存大小,另一方面,只要我們想辦法對數(shù)組進行分批處理,分而治之,將用過的變量及時銷毀(unset),一般是不會出現(xiàn)溢出問題的。
另外,為了節(jié)省PHP程序內(nèi)存損耗,我們應當盡可能減少靜態(tài)變量的使用,在需要數(shù)據(jù)重用時,可以考慮使用引用(&)。再一點就是:數(shù)據(jù)庫操作完成后,要馬上關閉連接;一個對象使用完,要及時調(diào)用析構函數(shù)(__destruct())。
二.unset銷毀變量并釋放內(nèi)存問題
PHP的unset()函數(shù)用來清除、銷毀變量,不用的變量,我們可以用unset()將它銷毀。但是某些時候,用unset()卻無法達到銷毀變 量占用的內(nèi)存!我們先看一個例子:
<?php
$s=str_repeat('1',255); //產(chǎn)生由255個1組成的字符串
$m=memory_get_usage(); //獲取當前占用內(nèi)存
unset($s);
$mm=memory_get_usage(); //unset()后再查看當前占用內(nèi)存
echo $m-$mm;
?>
最后輸出unset()之前占用內(nèi)存減去unset()之后占用內(nèi)存,如果是正數(shù),那么說明unset($s)已經(jīng)將$s從內(nèi)存中銷毀(或者說,unset()之后內(nèi)存占用減少了),可是我在PHP5和windows平臺下,得到的結果是:0。這是否可以說明,unset($s)并沒有起 到銷毀變量$s所占用內(nèi)存的作用呢?我們再作下面的例子:
<?php
$s=str_repeat('1',256); //產(chǎn)生由256個1組成的字符串
$m=memory_get_usage(); //獲取當前占用內(nèi)存
unset($s);
$mm=memory_get_usage(); //unset()后再查看當前占用內(nèi)存
echo $m-$mm;
?>
這個例子,和上面的例子幾乎相同,唯一的不同是,$s由256個1組成,即比第一個例子多了一個1,得到結果是:272。這是否可以說 明,unset($s)已經(jīng)將$s所占用的內(nèi)存銷毀了?
通過上面兩個例子,我們可以得出以下結論:
結論一、unset()函數(shù)只能在變量值占用內(nèi)存空間超過256字節(jié)時才會釋放內(nèi)存空間。
那么是不是只要變量值超過256,使用unset就可以釋放內(nèi)存空間呢?我們再通過一個例子來測試一下:
<?php
$s=str_repeat('1',256); //這和第二個例子完全相同
$p=&$s;
$m=memory_get_usage();
unset($s); //銷毀$s
$mm=memory_get_usage();
echo $p.'<br />';
echo $m-$mm;
?>
刷新頁面,我們看到第一行有256個1,第二行是0,按理說我們已經(jīng)銷毀了$s,而$p只是引用$s的變量,應該是沒有內(nèi)容了,另 外,unset($s)前后內(nèi)存占用沒變化!現(xiàn)在我們再做以下的例子:
<?php
$s=str_repeat('1',256); //這和第二個例子完全相同
$p=&$s;
$m=memory_get_usage();
$s=null; //設置$s為null
$mm=memory_get_usage();
echo $p.'<br />';
echo $m-$mm;
?>
現(xiàn)在刷新頁面,我們看到,輸出$p已經(jīng)是沒有內(nèi)容了,unset()前后內(nèi)存占用量之差是272,即已經(jīng)清除了變量占用的內(nèi)存。本例中的$s=null也 可以換成unset(),如下:
<?php
$s=str_repeat('1',256); //這和第二個例子完全相同
$p=&$s;
$m=memory_get_usage();
unset($s); //銷毀$s
unset($p);
$mm=memory_get_usage();
echo $p.'<br />';
echo $m-$mm;
?>
我們將$s和$p都使用unset()銷毀,這時再看內(nèi)存占用量之差也是272,說明這樣也可以釋放內(nèi)存。那么,我們可以得到另外一條結論:
結論二、只有當指向該變量的所有變量(如引用變量)都被銷毀后,才會釋放內(nèi)存。