如何仅在产品页面上阻止搜索引擎索引？

问题描述：

我希望所有产品页面都不是索引。他们不应该被谷歌或任何搜索引擎索引。我只想排名类别页面，网站信息等如何仅在产品页面上阻止搜索引擎索引？

那么你需要在不允许被索引的页面上使用'' – Naruto

@Naruto在动态系统上我不能使用这个选项，因为我的产品网页是动态的。我可以通过robots解决我的问题。文本代码 –

答

创建网站和代码的根旁

User-agent: * 
Disallow: /products/*

请仔细阅读文档的robots.txt的robots.txt，* - 表示任何符号。

或者更好聘请专业。

1）文件必须称为'robots.txt'，而不是'robot.txt'。 2）在'/ products /'之后不需要'*'，因为在Disallow中它始终是URL路径的*开头*。 3）robots.txt阻止爬行，不一定索引。 – unor