网络方法

当前位置:

什么是模拟蜘蛛抓取

浏览量:191次

站长可以输入自己网站上的任何一个网址,网管工具会发出Google蜘蛛,实时抓取页面内容,并显示出抓取的HTML代码,包括服务器头信息和页面代码。

另外工具也可以用来检查页面是否被黑。有时候黑客放入的代码会检查浏览器类型,如果是用户使用普通浏览器访问则返回正常内容,如果是搜索引擎蜘蛛访问,才返回黑客加上去的垃圾内容和垃圾链接。所以站长自己访问网站看不出异样,Google蜘蛛抓取到的却不是站长自己看到的内容。这个工具可以帮助站长检查页面是否存在安全漏洞。

来源:搜外网


[声明]
1.本博客内容均为网络转载,出于传递更多信息的目的;如转载稿涉及版权问题,请作者联系我们删除;
2.对于用户评论等信息,本网并不意味着赞同其观点或证实其内容的真实性;
3.对于不当转载或引用本网站内容而引起的任何纷争或其他损失,本网站不承担责任。
4.如果您发现本网站的内容侵犯了您的版权,请您的相关内容发至此邮箱【kefu@zmk188.com】,我们在确认后,会立即删除,