Robots.txt禁止具有特定单词的URL

问题描述 投票:0回答:2

我想禁止在URL中具有特定(种子_)单词的URL

www.example.com/tags/seeds_123-of-plant
www.example.com/tags/plant-have-seeds_124
www.example.com/tags/getting-seeds_78-out-of

在这些URL中[Seeds_]是一个特定的字符。

我在下面试了一遍。

disallow: /tags/*seeds_
disallow: /tags/*seeds
disallow: /tags/*seeds?

但没有任何效果,因为有时它显示在URL的中间。请提供正确的答案,因为我尝试了很多。更重要的是,不要给出答案

disallow: /tags/*seeds_123
disallow: /tags/*seeds_124?

因为我有近100个以上的URL,所以我不能单独禁止所有这些URL

robots.txt google-webmaster-tools
2个回答
0
投票

星号表示任何内容,因此这将禁止在tags目录中包含seeds_的任何内容。

不允许:/ tags / * seeds_ *


0
投票

我不知道为什么这些时间不起作用。但现在他们正在正常工作......

disallow: /tags/*seeds_
disallow: /tags/*seeds
© www.soinside.com 2019 - 2024. All rights reserved.