优化一直是一项比较有挑战性的工作，即使您按照成功的seo技术去做，并不一定会取得好收录、好排名。谷歌代理专家认为，要想网站收录好，先要从谷歌蜘蛛开始了解。

　　1.功能

　　搜索引擎会利用各种机器人，如蜘蛛、蚂蚁等，对互联网网页进行清扫搜索。在一个系统支持的独立工作方式下，网络蜘蛛会检查所有网页的meta标签、相关关键词与短语搜索主页开始。另外，蜘蛛还会跟随链接、复制访问页面，把一切能影响到网站排名的信息都手机至数据库中。

　　2.类型

　　谷歌的搜索引擎自动索引被称之为google bot，它是由复杂的算法来完成一切指令的。一旦发现新的信息，就会从url列表中访问并抓取。每次下载，这些机器人就会拉来各种数据，如图像、出版日期等，并在***终结果页上列出各个网站的地址信息。事实上，谷歌处理这些数据的蜘蛛主要有两类：freshbots和deepbots。

　　Freshbots：这些蜘蛛会去浏览互联网中***新鲜的信息，并把这些信息暂时存放在一个单独的子数据库中，这些信息随时都会被更新。

　　Deepbots：一个deepbot被称之为“每月履带式”。因为当它进入网站时，扫描发现并跟踪的链接会随着月份而推深。这种类型的蜘蛛是负责访问隐藏的内容和保存每一个访问页面。

　　其实，google bots跟其它的网络爬虫一样，都是非常有效的工具，在系统收集与信息存储方面发挥了巨大作用。每天，似乎都有成千上万的信息在不断变化，这时候，谷歌蜘蛛就已经在工作了!