Betty

Google为什么不听话呢？

新博客开张三天，google收录了。可是看了一下收录的页面，Betty又汗了。Betty明明已经在robots.txt里面写了Disallow: /*.php$
Disallow: /category/*/*
也提交了xml格式的sitemap，避免它收录重复内容和后台页面，可是google的收录结果里面还是有blog.myfairland.net/tech/wp-login.php、blog.myfairland.net/tech/category/blog/这样的页面。

Betty的上一个blog也是这样，在有robotx.txt和sitemap.xml的情况下，google开始收录时仍然收录了这些被禁止的页面，过了一阵子时间才消失。好像google在收录的最初是不看robots.txt和sitemap.xml的，过一阵子之后才会处理。正如那句常见的话，“您的提交我们已经收到，处理可能需要数小时乃至数天的时间”。google收录页面和处理robotx.txt、sitemap.xml等文件可能不是同步的。

相关文章

• Google的translator toolkit真好用
  注：本文只对使用专业翻译辅助软件的人有用 (/ □ \) http://translate.google.com/toolkit/list?hl=en#...
• Google声明考虑退出中国后各种言论之分析
  Google声明考虑退出中国，网上的言论形形色色，千奇百怪。有些人是受认识水平所限，有些人是屁股决定脑袋，有些人是故意把水搅混。 以下各段，破折号之前是网上各...
• 我在Google Docs无法保存文档了
  可以查看文档，但无法保存，无论是否翻墙、是否用https都不行。 以前也出现过一次，当时我以为是写的东西太敏感，触发了高级墙，普通翻墙术翻不过去。但这次，新建...
• Google要退出中国了
  Google厌倦了中国有关部门无休止的审查过滤要求，Google厌倦了无休止的让步妥协只换来中国政府对Google服务变本加厉的封锁，Google厌倦了中国政府...
• 试用Office Live Workspace
  因为Google Docs被炖得厉害，只好寻找一个替代品。听说微软的Office Live Workspace也做得不错了，特别是安装一个小插件之后，就可以在W...