求教用Java实现网站数据采集方案?
怎样用Java做网站数据采集,从一个网站抓取数据分析后根据定制的格式保存到自已的数据库中?
需要Java哪些类库
运用到的原理
------解决方案--------------------google一下apache的httpclient包
如果自己写,用java.net.URL和 java.net.URLConnection也可以
我最近也在研究这个,呵呵
------解决方案--------------------原理就是先访问要访问的地址,服务端Response HTML数据给你,对这个数据进行分析。用URLONNECION类实现
------解决方案--------------------能具体给个源码吗?
------解决方案--------------------这个说白了就是爬虫,网上有很多种实现的,不难,相信LZ可以搞定的