点击 121回答 11
2022-03-16 00:54
如何按数字大小编写Robots规则![]() ![]() 网站的URL是从/1.html到/10,000.html如果我希望/1.html到/5,000.html禁止收录,而/5,001.html到/10,000.html不受影响。请问如何用Robots来实现这个效果?--------------------------------------补充----------------------------------------------之前没想写太多,不过有人问了,就说一下为什么要屏蔽1.html到5000.html。出于某种原因的 考虑,1.html-5000.html每个URL对应的页面有多个URL。这1.html-5000.html也是不想让用户访问的。所以,想屏蔽这5000个URL。在robots中没有方法可以实现按数字大小的规则禁止收录吗?
|