网站删除死链切勿在使用robots进行限制

网站删除死链切勿在使用robots进行限制,第1张

网站删除死链切勿在使用robots进行限制,QQ截图20201016163859.png,第2张

小编前几周发的:百度删除死链可以用robots协议

大家切勿在试,确实搜索引擎知道了robots的限制不在抓取

但是死链没有删除掉,大家不要在盲目使用robots进行封堵死链

网站删除死链切勿在使用robots进行限制,QQ截图20201016164215.png,第3张

小编再次对站长深感抱歉,经过测试封堵死链

百度蜘蛛只抓取首页了,所以大家只能用按键精灵代替大家打开

因为百度现在会提示验证码,那些自动获取死链

都会d出百度验证码,如果你网站死链有规则

网站删除死链切勿在使用robots进行限制,QQ截图20201016164503.png,第4张

你网站文章如果是有规则性,可以百度批量生成网址生成即可 

比如是影视站那种网站就算了吧 无法删除死链的

因为他没有规则的,还是301导权新域名即可

欢迎分享,转载请注明来源:新瑞站长网

原文地址:https://www.qb97.cn/zaji/203.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2020-10-13
下一篇2020-10-17

发表评论

登录后才能评论

评论列表(0条)

    保存