广告
返回顶部
首页 > 资讯 > 后端开发 > PHP编程 >PHP内存溢出的解决方法详解
  • 524
分享到

PHP内存溢出的解决方法详解

2024-04-02 19:04:59 524人浏览 薄情痞子
摘要

目录1.处理数组时出现内存溢出2.使用sql查询数据,查出来很多,导致内存溢出3.假定日志中存放的记录数为500000条,那么解决方案如下4.上传excel文件时,出现内存溢出的情况

什么是内存溢出

内存溢出是指应用系统中存在无法回收的内存或使用的内存过多,最终使得程序运行要用到的内存大于虚拟机能提供的最大内存。

引起内存溢出的原因有很多种,常见的有以下几种:

1 内存中加载的数据量过于庞大,如一次从数据库取出过多数据;

2 集合类中有对对象的引用,使用完后未清空;

3 代码中存在死循环或循环产生过多重复的对象实体;

4 使用的第三方软件中的BUG;

5 启动参数内存值设定的过小;

下面来看些在开发中经常遇到的内存溢出的实例

内存溢出经常报错的情况

PHP Fatal error: Allowed memory size of 268 435 456 bytes exhausted

1.处理数组时出现内存溢出

1)使用迭代生成器,可以通过继承Iterator接口实现

2)使用关键词yield

function xrange($start, $end, $step = 1) {
    for ($i = $start; $i <= $end; $i += $step) {
        yield $i;
    }
}

foreach (xrange(1, 1000000) as $num) {
    echo $num, "\n";
}

2.使用sql查询数据,查出来很多,导致内存溢出

sql语句在Mysql中可以查询,但是使用php程序查询就报php内存溢出

1)这个问题在php的官方网站叫缓冲查询和非缓冲查询。php的查询缺省模式是缓冲模式。也就是,查询数据结果一次全部提取到内存里供php程序额外的功能,比如说,计算行数,将指针指向某一行等。

更重要的是程序对数据集反复进行二次查询和过滤操作。但这种缓冲查询模式的缺陷是消耗内存,也就是用空间换速度。

2)另外一种查询模式是非缓冲查询,数据库服务器会一条一条的返回数据,而不是一次全部返回,这样的结果是php程序消耗较少的内存,但却增加了数据库服务器的压力,因为数据库会一直等待php来取数据,一直到数据全部取完。

1.首先查询数据库需要进行limit进行分页查询

2.如果不使用limit,使用非缓冲查询

1.mysql:

$conn = mysql_connect("localhost", "user", "pass");
$db   = mysql_select_db("world");
$uresult = mysql_unbuffered_query("SELECT Name FROM City");    //非缓冲查询
if ($uresult) {
   while ($row = mysql_fetch_assoc($uresult)) {
       echo $row['Name'] . PHP_EOL;
   }
}

2.pdo_mysql:

$pdo = new PDO("mysql:host=localhost;dbname=world", 'my_user', 'my_pass');
$pdo->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);    //设置这个属性,就为非缓冲查询
$uresult = $pdo->query("SELECT Name FROM City");
if ($uresult) {
   while ($row = $uresult->fetch(PDO::FETCH_ASSOC)) {
       echo $row['Name'] . PHP_EOL;
   }
}

3.mysqli:

$mysqli  = new mysqli("localhost", "user", "passWord", "world");
$uresult = $mysqli->query("SELECT Name FROM City", MYSQLI_USE_RESULT);
if ($uresult) {
   while ($row = $uresult->fetch_assoc()) {
       echo $row['Name'] . PHP_EOL;
   }
}
$uresult->close();

3.假定日志中存放的记录数为500000条,那么解决方案如下

ini_set(‘memory_limit’,’64M’); //重置php可以使用的内存大小为64M,一般在远程主机上是不能修改php.ini文件的,只能通过程序设置。

注:在safe_mode(安全模式)下,ini_set失效

set_time_limit(600);//设置超时限制为6分钟
$farr = $Uarr = $Marr = $IParr = $data = $_sub = array();
$spt = ”$@#!$”;
$root = ”/Data/WEBapps/VisitLog”;
$path = $dpath = $fpath = NULL;
$path = $root.”/”.date(“Y-m”,$timestamp);
$dpath = $path.”/”.date(“m-d”,$timestamp);

for($j=0;$j<24;$j++){
    $v = ($j < 10) ? ”0″.$j : $j;
    $gpath = $dpath.”/”.$v.”.php”;

    if(!file_exists($gpath)){
        continue;

    } else {
        $arr = file($gpath);////将文件读入数组中
        array_shift($arr);//移出第一个单元-》
        $farr = array_merge($farr,$arr);
        unset($arr);
    }
}

if(empty($this->farr)){
    echo ”没有相关记录!”;
    exit;
}

while(!empty($farr)){
    $_sub = array_splice($farr, 0, 10000); //每次取出$farr中1000个
    for($i=0,$scount=count($_sub);$i<$scount;$i++){
        $arr = explode($spt,$_sub[$i]);
        $Uarr[] = $arr[1]; //vurl
        $Marr[] = $arr[2]; //vmark
        $IParr[] = $arr[3].” |$nbsp;”.$arr[1]; //IP
    }
    unset($_sub);//用完及时销毁
}
unset($farr);

这里,不难看出,一方面,我们要增加PHP可用内存大小,另一方面,只要我们想办法对数组进行分批处理,分而治之,将用过的变量及时销毁(unset),一般是不会出现溢出问题的。

4.上传excel文件时,出现内存溢出的情况

在文件中分配大点的内存设置内存治标不治本,而且服务器的php.ini(memory_limit =128M)有时候是很难改的。所以在文件中设置。但是只有php.ini中的安全模式safe_mode开启时才可以设置

ini_set('memory_limit', '521M');

解决方法:

protected /extensions/ExcelHelper.php 中945行 
$PHPReader->setReadDataOnly(true);  //在拿到数据后进行设置只读

    public static function importFromExcel($filePath, $blankRowDel = false)
    {
        set_time_limit(90);
        Yii::import('application.extensions.phpexcel.PHPExcel');
        $PHPExcel = new PHPExcel();
        //默认用excel2007读取excel,若格式不对,则用之前的版本进行读取
        $PHPReader = new PHPExcel_Reader_Excel2007();
        if (!$PHPReader->canRead($filePath)) {
            $PHPReader = new PHPExcel_Reader_Excel5();
            if (!$PHPReader->canRead($filePath)) {
                throw new Exception('can not read the excel file');
            }
        }
        $PHPReader->setReadDataOnly(true);

        $PHPExcel      = $PHPReader->load($filePath);
        $allSheetCount = $PHPExcel->getSheetCount();
        $excelData     = array();
        for ($currentSheetNum = 0; $currentSheetNum < $allSheetCount; $currentSheetNum++) {
            //读取excel文件中的第一个工作表
            $currentSheet = $PHPExcel->getSheet($currentSheetNum);
            //取得当前表名
            $currentSheetTitle = $currentSheet->getTitle();
            //取得最大的列号
            $allColumn = $currentSheet->getHighestColumn();
            //取得一共有多少行
            $allRow = $currentSheet->getHighestRow();
            // 从第一行获取列名
            $currentRow = 1;
            // 从第A列开始输出
            $colunmNameArray = array();
            $max_column_num  = PHPExcel_Cell::columnIndexFromString($allColumn);
            for ($current_column_num = 0; $current_column_num <= $max_column_num; $current_column_num++) {
                $currentColumn = PHPExcel_Cell::stringFromColumnIndex($current_column_num);
                $val           = $currentSheet->getCellByColumnAndRow($current_column_num, $currentRow)->getValue();
                if (empty($val)) {
                    continue;
                }
                if (is_object($val)) {
                    $colunmNameArray[$currentColumn] = '';
                    foreach ($val->getRichTextElements() as $cell) {
                        $colunmNameArray[$currentColumn] .= $cell->getText();
                    }
                } else {
                    $colunmNameArray[$currentColumn] = $val;
                }
            }

            //从第二行开始输出,因为excel表中第一行为列名
            $sheetData = array();
            for ($currentRow = 2; $currentRow <= $allRow; $currentRow++) {
                //从第A列开始输出 */
                $rowData   = array();
                $blankCell = 0;
                for ($current_column_num = 0; $current_column_num <= $max_column_num; $current_column_num++) {
                    $currentColumn = PHPExcel_Cell::stringFromColumnIndex($current_column_num);
                    $val           = $currentSheet->getCellByColumnAndRow($current_column_num, $currentRow)->getValue();
                    if (!isset($colunmNameArray[$currentColumn])) {
                        continue;
                    }
                    //如果输出汉字有乱码,则需将输出内容用iconv函数进行编码转换,如下将gb2312编码转为utf-8编码输出
                    if (is_object($val)) {
                        $rowData[$currentColumn] = '';
                        foreach ($val->getRichTextElements() as $cell) {
                            $rowData[$currentColumn] .= $cell->getText();
                        }
                    } else {
                        $rowData[$currentColumn] = $val;
                    }

                    if (empty($rowData[$currentColumn])) {
                        $blankCell++;
                    }
                }

                if (!$blankRowDel || chr($blankCell + 64) != $allColumn) {
                    $sheetData[] = $rowData;
                }
            }

            $excelData[$currentSheetTitle] = array(
                'header'  => $colunmNameArray,
                'content' => $sheetData,
            );
        }
        return $excelData;
    }

到此这篇关于PHP内存溢出的解决方法详解的文章就介绍到这了,更多相关PHP内存溢出内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: PHP内存溢出的解决方法详解

本文链接: https://www.lsjlt.com/news/164615.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • PHP内存溢出的解决方法详解
    目录1.处理数组时出现内存溢出2.使用sql查询数据,查出来很多,导致内存溢出3.假定日志中存放的记录数为500000条,那么解决方案如下4.上传excel文件时,出现内存溢出的情况...
    99+
    2022-11-13
  • php内存溢出如何解决
    PHP 内存溢出指的是在运行 PHP 脚本时,脚本所使用的内存超出了 PHP 预设的内存限制。解决 PHP 内存溢出问题可以采取以下...
    99+
    2023-09-26
    php
  • PHP内存溢出Allowed memory size of 解决办法
    以前追踪过这个问题,但是那个时候工具用的不太好,没看的这么细,这次搞的比较细,修正了偶以前的看法 .于是写小文一篇总结一下. PHP偶尔会爆一下如下 错误Allowed memory size of  xxx bytes exhausted...
    99+
    2023-09-04
    php 开发语言
  • 浅析php内存溢出报错的原因和解决方法
    在日常的 PHP 开发中,经常会遇到内存溢出的问题。内存溢出(memory overflow)指的是程序申请的内存空间超出了系统所能分配给它的范围,导致程序崩溃或者出现其它异常情况。本文将针对 PHP 内存溢出的报错内容进行探讨,希望对读者...
    99+
    2023-05-14
  • Spring Cloud Gateway 内存溢出的解决方案
    记 Spring Cloud Gateway 内存溢出查询过程 环境配置: org.springframework.boot : 2.1.4.RELEASE ...
    99+
    2022-11-12
  • android内存及内存溢出分析详解
    一、Android的内存机制    Android的程序由Java语言编写,所以Android的内存管理与Java的内存管理相似。程序员通过new...
    99+
    2022-06-06
    内存溢出 Android
  • python内存溢出如何解决
    在Python中,内存溢出通常是由于程序中使用了过多的内存导致的。解决内存溢出问题的一些常见方法包括:1. 优化算法和数据结构:检查...
    99+
    2023-09-14
    python
  • nodejs怎么解决内存溢出
    本篇内容主要讲解“nodejs怎么解决内存溢出”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“nodejs怎么解决内存溢出”吧!了解Node.js内存管理机制在开始解决内存溢出问题之前,我们需要了...
    99+
    2023-07-05
  • tomcat内存溢出如何解决
    Tomcat内存溢出是由于Tomcat运行时所需的内存超过了JVM分配给它的内存限制导致的。为了解决Tomcat内存溢出问题,可以采...
    99+
    2023-09-12
    tomcat
  • java内存溢出如何解决
    Java内存溢出(Out of Memory Error)是指Java程序在运行过程中申请的内存超出了JVM所能提供的最大内存限制,...
    99+
    2023-10-28
    java
  • redis内存溢出怎么解决
    要解决Redis的内存溢出问题,可以采取以下措施:1. 配置合理的最大内存限制:通过在Redis配置文件中设置`maxmemory`...
    99+
    2023-09-04
    redis
  • JVM内存溢出怎么解决
    本篇内容介绍了“JVM内存溢出怎么解决”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!栈溢出(虚拟机栈和本地方法栈)产生原因在HotSpot中...
    99+
    2023-06-22
  • docker启动ES内存溢出的解决方案
    在elasticsearch的config中加jvm.options文件,修改堆栈大小,默认是2GB,直接启动es即可,保证之前已经映射了配置文件。 -Xms5g -Xmx5g ...
    99+
    2022-11-12
  • sql查询数据过多内存溢出的解决方法
    这篇文章主要介绍sql查询数据过多内存溢出的解决方法,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!正常来说,一般是不会出现这种情况的,但也不能保证,偶尔有这种情况发生,解决方案如下:...
    99+
    2022-10-18
  • Android加载图片内存溢出问题解决方法
    1. 在Android软件开发过程中,图片处理是经常遇到的。 在将图片转换成Bitmap的时候,由于图片的大小不一样,当遇到很大的图片的时候会出现超出内存的问题,为了解决这个问...
    99+
    2022-06-06
    方法 图片 内存溢出 Android
  • MySQL OOM(内存溢出)的解决思路
    OOM全称"Out Of Memory",即内存溢出。 内存溢出已经是软件开发历史上存在了近40年的“老大难”问题。在操作系统上运行各种软件时,软件所需申请的内存远远超出了物理内存所承受的大小,就叫内存溢出。 内...
    99+
    2022-05-23
    MySQL oom MySQL 内存溢出 MySQL 内存溢出解决
  • jvm堆内存溢出如何解决
    JVM堆内存溢出(OutOfMemoryError)的解决方法通常有以下几种:1. 增加堆内存:通过修改JVM启动参数来增加堆内存的...
    99+
    2023-09-27
    jvm
  • java堆内存溢出如何解决
    Java堆内存溢出指的是在Java应用程序中分配给Java堆的内存空间不足,导致无法继续正常执行程序。要解决Java堆内存溢出问题,...
    99+
    2023-08-23
    java
  • weblogic报内存溢出如何解决
    WebLogic报内存溢出的问题可以通过以下步骤来解决:1. 确认内存溢出的原因:查看WebLogic服务器的日志文件或者堆转储文件...
    99+
    2023-09-01
    weblogic
  • java中出现内存溢出如何解决
    本篇文章为大家展示了java中出现内存溢出如何解决,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。常用的java框架有哪些1.SpringMVC,Spring Web MVC是一种基于Java的实现了...
    99+
    2023-06-14
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作