Google 蜘蛛池，被指为 Google 爬虫 集群，是一个庞大 系统，负责索引 网上各个网站的网页。它主要 功能是帮助Google 搜索 引擎精准 地返回用户请求 的相关结果。 https://socialwoot.com/story23053688/深入分析-google-蜘蛛池