mediabot

如果你看过一些有关SEO的文章，一定会发现有这样一个名词“Google蜘蛛”，也叫做Google Spider。 常见的Google蜘蛛有两种。 一种是搜索引擎用的，叫做Googlebot，它会访问制定的网页，收集该网页上的链接，而且会顺着这些链接找其他的网页，通过这些链接，把世界上的网页连成了一个巨大的网，所以这些在网络上爬行的Googlebot也被称为Google蜘蛛