User Agent Switcher 是一款可以模拟搜索引擎蜘蛛的程序。使用模拟后的Agent 访问那些针对搜索引擎做了手脚的网页,可以看到真实的内容。判断蜘蛛代码参见:区别蜘蛛代码(ASP)。
安装方法:
打开页面 https://addons.mozilla.org/en-US/firefox/browse/type:1 ,在搜索框输入User Agent Switcher ,下载安装。
增加代理:
FireFox 工具菜单-> User Agent Switcher->Options->Options ,打开页面。
增加百度代理后,在工具菜单选择不同的代理,刷新访问的页面即可。
测试地址:http://www.seo007.cn/tools/spider.asp 。
当正常访问时显示:没有模拟,正常页面访问。
当模拟访问时显示:当前模拟:×××。