科技网

当前位置: 首页 >智能

fontcolorredMSN搜索引擎窃

智能
来源: 作者: 2019-03-12 00:47:49

据报道,一位名为Jason Dowdell的SEO专家在研究中发现,微软刚刚推出的搜索引擎可能在索引并“使用”Google的搜索结果。下面是Jason Dowdell在自己Blog中的详细阐述。

一位开发者在侦测自己的站点服务器时发现,一个特殊的IP地址——65.54.188.

fontcolorredMSN搜索引擎窃

86在扫描他的站点,当他将这一情况反映给我时,我开始留意这个问题。该IP是微软公司在华盛顿 98052,Redmond注册的。非常奇怪的是,这一来自微软的IP不是在发送基本的头部信息(header information),而是在服务器上“摸索获取”类似于http robot名称(注:搜索机器人)或者鉴定信息甚至浏览器种类等信息。

今日“微软”其他相关 《官司不断:Novell又将起诉微软垄断》

毫无疑问,这一情况表明微软的搜索引擎正在“爬行工作”(crawling),比较特殊的是它居然在“收集”(Spidering)那些已经不存在的URL,而且是在秒之间完成对一个页的扫描工作(搜索引擎没隔一段时间会对站点部分进行扫描,而且经常来回收集没有被采集的URL)。这位不速之客从早上7:37分开始,直到晚上12点依然还在该站点服务器上“辛勤的工作”。

这个“扫描者”(crawler)的身份是:

msnbot/0.3(+。

这确实是一个匪夷所思的问题。问题的关键不仅是这个“来访者”所扫描的URL已经不存在,而且这些站点的URL只有在Google搜索引擎中使用“site:”的形式才能搜索到。而微软的MSN搜索引擎不能查找到这样的结果,即使在其刚刚发布的beta版本搜索引擎中。但是仅仅在这个“来访者”离开后的数小时之内,微软的搜索引擎便可以找到同样完整的搜索结果。

相关推荐