wordpress的robots分享
- 发表于
- WordPress
对一个问题纠结了好久,就是我的URL结构现在越来越不喜欢了,但考虑到现在搜索收录又不敢随意改变结构,而我用GG管理员查看的时候发现重复收录页过多,并且有一些错误抓取,于是暂时加了个robots.txt来限制一看,看是否有效果,现在用了有一周了,发现效果还是有的,但不大,会继续观察。
User-agent: *
Disallow: /wp-
Allow: /wp-content/uploads/
Disallow: /?
Disallow: /*?*
Disallow: /wss/
Disallow: /index.php?
Disallow: /index.php/
Disallow: /*.css$
Disallow: /feed
Disallow: /*/*/feed
Disallow: /*/*.html/feed
Disallow: /*?replytocom=
Disallow: /trackback
Disallow: /*/*/trackback
Disallow: /author/admin
Disallow: /comments/feed
Disallow: /wp-content/
Disallow: /wp-includes/
User-agent: Mediapartners-Google
Allow: /
Sitemap: https://www.uedbox.com/sitemap.xml
以上为本站现用robots.txt
原文连接:wordpress的robots分享
所有媒体,可在保留署名、
原文连接
的情况下转载,若非则不得使用我方内容。