???我做的spider不需要下载gif,.exe,pdf...等文件,我该如何判断
我做的spider不需要下载gif,.exe,pdf...等文件,
只需要 .asp .html .htm...等等页面文件
我该如何判断
本来想判断ContentType 如果是 'text/ '的,好像gif的也是 'text/ '不行
WebResponse response = null;
Stream stream = null;
StreamReader reader = null;
try
{
HttpWebRequest request = (HttpWebRequest)WebRequest.Create(m_uri);
response = request.GetResponse();
stream = response.GetResponseStream();
if( !response.ContentType.ToLower().StartsWith( "text/ ") )
------解决方案--------------------安静