wordpress的robots分享

对一个问题纠结了好久,就是我的URL结构现在越来越不喜欢了,但考虑到现在搜索收录又不敢随意改变结构,而我用GG管理员查看的时候发现重复收录页过多,并且有一些错误抓取,于是暂时加了个robots.txt来限制一看,看是否有效果,现在用了有一周了,发现效果还是有的,但不大,会继续观察。

以上为本站现用robots.txt