简约美的 Robots

下面是以前我的 robots.txt

#
# robots.txt for scavin
# Version 07.09.12
#

Sitemap: http://www.appinn.com/sitemap.xml

User-agent: *
Disallow: /*?p*
Disallow: /cgi-bin/
Disallow: /wp-
Disallow: /comments/feed
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /feed/
Disallow: /trackback/
Disallow: */feed*
Disallow: */trackback
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.wmv$
Disallow: /*.cgi$

下面是新的 robots.txt

User-agent: *
Disallow: /*/feed/
Disallow: /*/trackback/

来自大牛 Techcrunch


了解 scavin weblog 的更多信息

Subscribe to get the latest posts sent to your email.

发表评论

此站点使用Akismet来减少垃圾评论。了解我们如何处理您的评论数据