xilv(楼主) 1

为什么批量采集时部分图片无法采集到

为什么批量采集时部分图片无法采集到?
反复调试过许多回,同样的规则下采集,采集的同一来源,但是有一些帖子可以正常采集,而部分帖子的图片始终无法采集过来,求问一般会是什么因素导致的?
真的是百思不得姐,只能请教大神!

发布于 2017-09-18 16:56 0 回复 举报
iCMSdev 2

在后台直接用浏览器采集
因为各种原因很容易造成PHP执行超时 所以会出现有些内容没有采集完整
可以采用shell采集
具体看
https://gitee.com/php/iCMS-tools/tree/master/php.shell/v7.0
spider.shell.php

发布于 2017-09-19 09:06 0 回复 举报
验证码 换一张
取 消