修改了商品详情页url之后robots.txt的写法

2016-07-07 15:22 来源：www.chinab4c.com 作者：ecshop专家

我把商品详情页goods-*.html修改成了product-*.html

静态化规则中也做了相应的修改：
增加了RewriteRule ^(.*)/product-([0-9]+)(.*)\.html$ $1/goods\.php\?id=$2[I]

考虑到以前收录的商品仍然有大量的goods-*.html，客户也会从这个入口访问，因此仍做了保留：
RewriteRule ^(.*)/goods-([0-9]+)(.*)\.html$ $1/goods\.php\?id=$2[I]

问题：这种修改在收录时会被搜索判断为重复页面（因为goods-*.html与product-*.html
都是相同的页面）。因此想在robots.txt中屏蔽掉搜索对goods-*.html的收录，请问这个语法该如何写。求教了！

回答：
是否是写成：Disallow: /goods-*.html ?

应该是的。。。

不错

对不对哦

百度自己就有关于robots.txt的帮助文档，具体位置在
http://www.baidu.com/search/robots.html
很详细

百度资料上没有说明这种情况啊。