SEO-搜索引擎优化实验室

上海SEO顾问(中国最具原创精神的SEO博客)

« 我的MSN头像图片下载类网站TITLE写法对比实验 »

Google蜘蛛对没链接的sitemap.xml处理方式

分享按钮

实验内容:GOOGLE蜘蛛是否会自动爬上sitemap
实验周期:2007年1月17日~2007年2月6日   (共18天)
实验所用sitemap文件:  http://jinpingmei.qkcf.com/sitemap.xml
索引目标:http://jinpingmei.qkcf.com/blog/
实验重点:Google能否爬上没有链接的sitemap.xml文件


在没有外部链接的情况下,Google蜘蛛是否会自己寻找站点下的sitemap.xml文件呢?  经过20多天的观察,终于有了结果。

 

检测数据:
2007-2-10    google收录 24项     狗狗link 0项
2007-2-9 1   google收录 24项     狗狗link 0项
2007-2-8 1   google收录 24项     狗狗link 0项
2007-2-7 1   google收录 24项     狗狗link 0项
2007-2-6 1   google收录 24项     狗狗link 0项  <--- 开始有索引数据

2007-2-3 2   google收录 0 项     狗狗link 0项
2007-2-2 1   google收录 0 项     狗狗link 0项
2007-2-1 1   google收录 0 项     狗狗link 0项
2007-1-31    google收录 0 项     狗狗link 0项
2007-1-29    google收录 0 项     狗狗link 0项
2007-1-28    google收录 0 项     狗狗link 0项
2007-1-26    google收录 0 项     狗狗link 0项
2007-1-25    google收录 0 项     狗狗link 0项
2007-1-24    google收录 0 项     狗狗link 0项
2007-1-23    google收录 0 项     狗狗link 0项
2007-1-22    google收录 0 项     狗狗link 0项
2007-1-21    google收录 0 项     狗狗link 0项
2007-1-20    google收录 0 项     狗狗link 0项
2007-1-19    google收录 0 项     狗狗link 0项
2007-1-18    google收录 0 项     狗狗link 0项
2007-1-17    google收录 0 项     狗狗link 0项

Google成功索引截图:

原页面:http://www.google.cn/search?complete=1&hl=zh-CN&newwindow=1&q=site%3Ajinpingmei.qkcf.com%2Fblog%2F&btnG=Google+%E6%90%9C%E7%B4%A2&meta=

结果检验:

需要验证的有2个方面:
第一:确认“http://jinpingmei.qkcf.com/blog/”没有任何外部链接。如果有外部链接指向该地址,那就无法保证Google蜘蛛是通过sitemap进行索引的。

下面是Google中使用  link: jinpingmei.qkcf.com/blog/   的结果:

这是Yahoo中用 linkdomain:jinpingmei.qkcf.com/blog/  的结果:

这里有一个疑问:在Yahoo!的结果内有一个奇怪的链接,Google蜘蛛是不是通过这个外部链接进行的索引?
Kyw的观点是:NO! Google不是通过该链接进行的索引。从检测数据来看,Google是一次性收录现象,收录后续的几天内数量也没变化。如果是因为外部链接索引的,就不是这样一次性收录现象,而是索引数量逐步增加。另外Yahoo!给出的这个链接地址非常奇怪,不是正常的外部链接。

第二:确认sitemap.xml 没有任何链接指向它。这个我可以保证,没有在网站做链接,也没有在Google管理员工具内提交过。

实验结果: Google蜘蛛会自动爬上没有链接的sitemap文件,并进行索引。

这是SEO-搜引擎优化实验室的第一个正式实验报告。Kyw对SEO实验非常有兴趣,这里将成为中国第一的SEO实验室。

如果您同样对搜索引擎优化感兴趣,您可以到留言本留下您的建议和想法,Kyw也希望通过本博客结交更多的朋友 


分享按钮

 作者:Kyw@上海SEO搜索引擎优化实验室
 原文链接:http://www.seotest.cn/blog/over-Google-Spider-sitemap.html
 版权所有,转载请以链接形式注明作者及原始出处。

好文章就要收藏:


  • quote 2.深圳小兵
  • 后悔来晚了,不过还好
  • 2007-7-18 13:52:19 回复该留言

发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

©2007-2011 上海SEO|搜索引擎优化实验室 版权所有  沪ICP备07005018号

Powered By Z-Blog