关于网站地图的问题
大家好，最近在做一个东西，类似于网站地图这种问题，就是输入一个网址，然后给出相应的超链接，具体的不太好说，大家可以参考网站地图生成器，现在主要的问题是思路呀，没有一点头绪呀，注意，爬取一个网页的所有超链接很简单，我要的是网站地图，而不是所有网页的超链接，这方面还请大家指导一下，小弟是新人，第一次发帖，希望大家多多帮助一下！最后重点，就是输入一个地址，得到这个网站的地图，当然需要考虑roboots协议的。谢谢了
------解决方案--------------------
网站地图一般是xml配置的。

参考：http://bbs.chinaz.com/archiver/Club/thread-4856560-1.html
------解决方案--------------------
和网上的网站地图工具有什么区别？