站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问
站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问
具体说:我们的站点突然被大量抓取,包括百度蜘蛛和其它不知名蜘蛛,我们不想做UA封禁和IP封禁,这种情况下是否可以使用闭站工具暂时拒绝百度蜘蛛?
答:闭站保护没有这个功能,你希望达到的效果是:不让蜘蛛访问;但用户可以正常访问。但闭站保护工具的要求是:蜘蛛和用户都不能访问。
来源:seo优化网 转载注明出处!
本文标题:站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问
本文由设计学习网整理发布,不代表设计学习网立场,转载联系作者并注明出处:https://ffjianzhan.cn/seo/11135.html