国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 開發(fā) > PHP > 正文

phpQuery占用內(nèi)存過多的處理方法

2024-05-04 23:19:40
字體:
供稿:網(wǎng)友
phpQuery是一個用php實(shí)現(xiàn)的類似jQuery的開源項目,可以在服務(wù)器端以jQuery的語法形式解析網(wǎng)頁元素。 相對于正則或其它方式匹配網(wǎng)頁方式,phpQuery使用起來要方便的多。
在使用phpQuery采集網(wǎng)頁時,遇到一個問題:在處理大量網(wǎng)頁之后,phpQuery占用的內(nèi)存數(shù)量非常驚人(很快就超過了1G),
比如這段代碼:

復(fù)制代碼 代碼如下:


while (true) {
    phpQuery::newDocumentFile($htmlFile);
    // 處理網(wǎng)頁元素...
    echo memory_get_usage() . "/n";
}


謹(jǐn)慎運(yùn)行上面這段代碼,它會很快用光你的內(nèi)存。
經(jīng)過查看phpQuery的源代碼終于發(fā)現(xiàn)了問題所在,phpQuery在每處理一個網(wǎng)頁就會產(chǎn)生一個DOMDocumentWrapper 對象,而每個DOMDocumentWrapper 對象會被保存在靜態(tài)成員$documents中(phpQuery::createDocumentWrapper中),這個變量是一個數(shù)組,每解析一個網(wǎng)頁數(shù)組元素就增加一個。
phpQuery::$documents[$wrapper->id] = $wrapper;
找到問題后,解決就很容易了,每次解析完一個網(wǎng)頁,把phpQuery::$documents置空即可。

復(fù)制代碼 代碼如下:


while (true) {
    phpQuery::newDocumentFile($htmlFile);
    // 處理網(wǎng)頁元素...
    phpQuery::$documents = array();
    echo memory_get_usage() . "/n";
}


內(nèi)存占用穩(wěn)定了。
發(fā)表評論 共有條評論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 庆元县| 广饶县| 台南市| 牟定县| 辉县市| 遂平县| 新竹县| 蓬溪县| 洛宁县| 泸州市| 丹江口市| 曲松县| 新昌县| 北宁市| 昌黎县| 通江县| 迁安市| 湖州市| 竹溪县| 甘孜县| 扎鲁特旗| 四川省| 文安县| 徐汇区| 肥城市| 太保市| 和田县| 天峻县| 达日县| 广南县| 巴南区| 平顶山市| 寻乌县| 成安县| 宣城市| 花莲县| 金寨县| 永和县| 万全县| 长顺县| 逊克县|