Google的两个爬虫程序原理介绍下面我们以搜索引擎中做的最好的google为例，分析搜索引擎是如何抓取信息，如何处理信息。

　　Google爬虫程序拥有2种：刷新爬虫，和深度探测爬虫，刷新爬虫部分昼夜的将抓取来的信息放在一个特定的数据库中，由于刷新爬虫个和主要索引程序一起提供搜索结果，有的时候您会发现，你的页面更新突然出现在搜索结果页面，但是过了一会又突然消失了，这是因为刷新爬虫在不停的抓去信息，不停的重写，给我的感觉是刷新爬虫的存储机制影响比较像数据结构中的栈，先进后出，后就进先出，消失的这段时间各位seo不要着急，还是那个样子不停的更新1月后就会慢慢出现在搜索结果中，不过现在可能等待时间没有那么长。如果你的页面已经在搜索引擎的索引中出现，刷新爬虫一旦发现你的更新，爬虫程序会很快的将您的更新显示出来，但是还是不够稳定，要一直等到深度爬虫更新主要索引，您的页面才能够足够的稳定。

    但是网站的设计者，并不能保证自己设计的网站是天衣无缝的，都会有很多问题：比如说网页中出现死链接，网页内容过多等，都导致爬虫程序无法正确的抓取完整个页面的内容，或许爬虫只抓去了这个页面的头部，在抓去身子的时候发现自己存储信息的地方不够了，不得不离开。所以我们在设计网站的时候都应该注意这些问题，建议各位网站设计者能够把网页设计的容易让爬虫接受。

　　搜索互动用简单的流程介绍下搜索引擎收录过程：刷新爬虫程序--------》发现信息----------》抓取信息----------》放在专用数据库-----------》等待索引整理----------》索引整理(深度爬虫访问主要索引)-------》索引完成，某关键词的排名都已经计算好-------》等待用户搜索--------》返回给用户搜索结果。

    以上是搜素互动在关键词优化过程中总结的一些经验，供广大网友参考。