已经开发了一个check links,他会使用你的IE去检查你的网站里有没有死链接,而且对它稍稍改动,就是一个spider了。真是不错的东东。不过我不打算免费下载,原因不好说,因为…..有些东东很易被人模仿。我没办法申请一个专利,就这么自己一个人用吧。过一段时间我再用这个东东做一个BLog评分系统出来,借以在各个blog托管站上搜索blogger们的发贴数,不过可能他们不让我搜。但至少可以搜到用Lblog的有独立域名的牛人blogger们.。
该软件最好的地方就是,可以识别javascript或者vbscript生成的链接。呵呵,不错吧,用asp做了好久没有实现的功能,现在很容易就实现了。不知道google,baidu实现了这个没有。不过这个检索的速度实在太慢了,做搜索引擎太不现实了。做一个blog行业的还是可能的。
下一步,是把它做成多线程的,这样的话检索速度就会快很多。如果能够做成一个spider,倒不错。have a try!