用curl抓取网页的时候，为什么小弟我的每次都只能抓取18个左右就自动停止了
日期：2014-05-17 浏览次数：20539 次
用curl抓取网页的时候，为什么我的每次都只能抓取18个左右就自动停止了？
用curl抓取网页的时候，为什么我的每次都只能抓取18个左右就自动停止了？
代码如下
------解决方案--------------------
如果不是每个网站都这样，就可能是这个网站有限制
用curl抓取网页的时候，为什么我的每次都只能抓取18个左右就自动停止了？
代码如下
- PHP code
<?php
for($i=2;$i<30;$i++)
{
$ch = curl_init("http://www.readnovel.com/novel/169509/$i.html");
$fp = fopen("novel-$i.txt", "w");
curl_setopt($ch, CURLOPT_FILE, $fp);
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_TIMEOUT, "100");
curl_exec($ch);
curl_close($ch);
fclose($fp);
echo "第".$i."页成功保存</br>";
}
echo "抓取完成";
?>
------解决方案--------------------
如果不是每个网站都这样，就可能是这个网站有限制
免责声明： 本文仅代表作者个人观点，与爱易网无关。其原创性以及文中陈述文字和内容未经本站证实，对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺，请读者仅作参考，并请自行核实相关内容。
