我在一个相当大的站点上工作,它每小时生成一个动态的站点地图。现在,在工具中,站点地图还没有提交,我很害羞,因为我担心新内容(出现在动态站点地图中)不会很快被抓取。所以我的问题是: GWT多久检查一次提交的站点地图?
在使用GWT和动态页面时,还有什么我应该知道的吗?
我查看了这个线程爬虫检查sitemap.xml更新的频率是多少次?,根据我的理解,当站点定期更新时,谷歌会更频繁地爬行--但同样的情况也适用于GWT吗?
发布于 2013-02-19 13:43:32
站点地图文件的抓取实际上是由googlebot执行的。获取站点地图的频率似乎受pagerank和更改频率的控制,类似于其他urls的重爬调度方式。
我有几个站点地图在公关范围从2到5。Googlebot似乎每月从一次到六次之间获取站点地图文件。我的站点地图很少更新(平均每月少于一次)。
无论如何,提交站点地图只会有帮助。如果Googlebot确实在站点地图中找到了新的urls来爬行,那么它应该立即进行爬行。如果它没有在站点地图中找到urls,它就会像在其他地方一样快速地抓取它们。
https://webmasters.stackexchange.com/questions/43874
复制相似问题