wordpress的robots分享
- 发表于
- WordPress
对一个问题纠结了好久，就是我的URL结构现在越来越不喜欢了，但考虑到现在搜索收录又不敢随意改变结构，而我用GG管理员查看的时候发现重复收录页过多，并且有一些错误抓取，于是暂时加了个robots.txt来限制一看，看是否有效果，现在用了有一周了，发现效果还是有的，但不大，会继续观察。
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 |
User-agent: * Disallow: /wp- Allow: /wp-content/uploads/ Disallow: /? Disallow: /*?* Disallow: /wss/ Disallow: /index.php? Disallow: /index.php/ Disallow: /*.css$ Disallow: /feed Disallow: /*/*/feed Disallow: /*/*.html/feed Disallow: /*?replytocom= Disallow: /trackback Disallow: /*/*/trackback Disallow: /author/admin Disallow: /comments/feed Disallow: /wp-content/ Disallow: /wp-includes/ User-agent: Mediapartners-Google Allow: / Sitemap: https://www.uedbox.com/sitemap.xml |
以上为本站现用robots.txt
原文连接：wordpress的robots分享
所有媒体，可在保留署名、
原文连接的情况下转载，若非则不得使用我方内容。
