推广 热搜: 食品  快递      www  民事主体  网络营销  代理  东莞市  橡塑 
点击 288回答 9 2022-03-16 05:17

robots.txt禁止收录该url,site:网址怎么还是收录了该url

已解决 悬赏分:60 - 解决时间 2022-03-17 05:26
网站最近更改了固定链接,就用robots禁止蜘蛛爬之前的动态url了,现在site:网址还是出现了之前收录的动态url,是需要时间吗还是要采取其它的措施
反对 0举报 0 收藏 0 打赏 0
最佳答案
支持 0 反对 0 举报 2022-03-16 06:52
网站最近更...
支持 0 反对 0 举报 2022-03-16 08:22
这么失败啊,先收录了再说吗?
支持 0 反对 0 举报 2022-03-16 08:49
我以前也遇到过的,百度不像谷歌更新的快,你需要等一段时间,百度就会删除你的错误链接了~!
支持 0 反对 0 举报 2022-03-16 10:04
需要一定周期的,等等
支持 0 反对 0 举报 2022-03-16 10:53
要等百度识别,Robots.txt识别很慢。
支持 0 反对 0 举报 2022-03-16 11:34
亲测:日,Robots屏蔽百度蜘蛛,
日,收录未减少。查看日志,百度蜘蛛只访问robots文件和根目录。
支持 0 反对 0 举报 2022-03-16 11:39
一般来说分三个阶段:
第一:刚更改Robots文件的这几天,百度还是会继续收录;
第二:三五天之后,百度不会收录动态URL,但是百度快照会回档,你之前几个月的动态URL,使用Site查询的时候,还是会出现;
第三:再一到两个星期之后,动态页面会在百度的数据库全部删除,就不会再出现了。具体需要多久多久,需要结合网站以及百度具体的情况分析!
支持 0 反对 0 举报 2022-03-16 13:14
这个一般需要很长时间才不收录,我记得之前用了三个多月时间百度才没收录了。
支持 0 反对 0 举报 2022-03-16 14:36
应该是百度还没更新过来,写了Robots后百度要有一个反应时间,大约1-2周的时间吧
网站首页  |  营业执照  |  关于我们  |  联系方式  |  使用协议  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  网站留言  |  RSS订阅  |  违规举报