链接检测工具域名检测工具

链接检查工具(ScreamingFrogSEOSpider)是一款可以代理抓取，制作sitemap，导出url等功能，等非常实用的连接检查工具，欢迎下载！

一个网站的内部链接是否正确，是影响网站SEO的重要因素之
一。“小站靠外链，大站靠内链”，只有在做好内链的前提下，有规模的网站才能够事半功倍的将排名优化上去。对于链接爬行工具来说，可能大家第一印象想起的就是Xenu。Xenu可以说是比较早期的一批SEO工具，而Xenu的功能也是较为普通。那么今天就为大家介绍一款和Xenu同样功能的软件，由ScreamingFrog公司所出的SEOSpider。可能有些朋友对于ScreamingFrog不太了解，我做一下简单的介绍吧，ScreamingFrog是英国的一家网络公司，而ScreamingFrogSEOSpider则是他们的一个产品。在Moz所发布的行业报告里关于Top10SEO工具一项排名，ScreamingFrog是排到了第5的位置。Spider分为试用版与收费版，试用版的权限较为鸡肋，只能爬行抓取到500个URL而已。而收费版的话呢，是99英镑/年。建议大家可以下载一个试用版玩玩看，如果觉得真的不错，Adrian建议你还是买一个正版。ScreamingFrogSEOSpider

Spider的抓取方式可以分为Spider与URL，简单点理解就是一个你可以放一个页面或域名开始抓取，另外一个则是放一个URL文件进去抓取。你在输入好url或选择好url文件后则会开始抓取内容，那么问题来了，Spider可以为我们抓取页面的什么内容呢？

这里大家可能还是看不太懂，那Adrian为大家简单举例解释一下。案例一：D姐想要抓UC所有页面，其中不包括CSS，JS，SWF（因为这些浪费时间和资源）。那么就可以取消勾选四个选项了；案例二：民工想要像蜘蛛一样爬取UC的页面，那么就可以只勾选Ignorerobots.txt这一项了；案例三：何元想要只抓dx的首页所有链接，全部勾选上，除了不要勾Ignore与Limitsearchtoal就可以了，当然记得勾上LimitSearchDepth并设置层级为1；如果还看不懂，那我也无能为力了，只能好好培训一下SEO了。其实Spider的功能有许多，我就不一一提及了。说几个我常用的功能吧！第一个，正则爬行页面。在configuration中的include和exclude里都有可以写正则的地方，在那里你可以设置你想要特定抓取爬行的链接。至于怎么使坏，需要你自己想象了。第二个，速度限制。在configuration中的Speed中有关于速度的限制，这里需要提一下的是速度上的限制不仅仅指的是线程，还有限制抓取URL速度，例如你想要1URL/S，又或者是2URL/S。这个功能可以躲避部分有防重复爬行限制的网站。第三个，UserAgent设置。在configuration中有一个UserAgent里可以设置你的身份，你可以设置为某搜索引擎的蜘蛛或浏览器都可以。第四个，自定义字段检查功能。同样是在configuration中的custom，这个功能可以说是比较好用的功能，主要是可以让Spider在爬行抓取的同时可以根据你所设置的自定义字段进行筛选。例如：我在Custom设置了包含DVD这个字眼，那么所有出现DVD字眼的页面都会特别筛选出来。

西西所有软件经过严格安装检测,保证不会有任何病毒木马等信息,请大家放心使用;大家在安装的时候务必留意每一步的Next;强烈推荐使用西西软件盒或迅雷下载下载本站软件以获取最佳的下载速度。如果您觉得西西还不错，请把西西加入到您的收藏夹里以便下一次的访问^-^^-^西西下载QQ群:①②③(满)