谷歌分享三种让Googlebot抓取网站的方法
Google 的 Gary Illyes 和 Lizzi Sassman 讨论了触发 Googlebot 爬行增加的三个因素。虽然他们淡化了持续抓取的必要性，但他们承认有一些方法可以鼓励 Googlebot 重新访问网站。
1、优质内容对抓取频率的影响
他们谈论的事情之一是网站的质量。很多人都遭受发现的未索引问题，这有时是由人们已经学习并认为是良好实践的某些 SEO 实践引起的。我从事 SEO 已有 25 年了，有一点始终不变，那就是行业定义的最佳实践通常比 Google 的做法落后很多年。然而，如果一个人确信自己做的每件事都是正确的，就很难看出哪里出了问题。
Gary Illyes 指出抓取频率升高的原因，并解释说，提高爬虫抓取的广度和深度的触发因素之一是 Google 算法检测到的高质量信号。
Gary Illyes说道：
“……一般来说，如果一个网站的内容质量高、有用且人们普遍喜欢它，那么谷歌爬虫往往会从该网站抓取更多内容……”
上述陈述遗漏了很多细微差别，例如哪些高质量和有用的信号 会触发 Google 决定更频繁地抓取？
好吧，谷歌从来没有说过。但我们可以推测，以下是我的一些有根据的猜测。
我们知道有一些关于品牌搜索的专利将用户进行的品牌搜索算作隐含链接。有些人认为“隐含链接”是品牌提及，但“品牌提及”绝对不是专利所谈论的内容。
总的来说，我认为表明人们认为网站有帮助的信号可以帮助网站获得更好的排名。有时这可以给人们他们期望看到的东西，给人们他们期望看到的东西。
网站所有者会告诉我，谷歌正在对垃圾网站进行排名，当我看一下时，我就能明白他们的意思，这些网站有点垃圾。但另一方面，内容给了人们他们想要的东西，因为他们真的不知道如何区分他们期望看到的内容和实际的优质内容（我称之为 Froot Loops 算法）。
什么是 Froot Loops 算法？这是谷歌依靠用户满意度信号来判断其搜索结果是否让用户满意的结果。以下是我之前发布的有关 Google Froot Loops 算法的内容：
“走在超市麦片过道上时，你是否注意到货架上摆满了多少种含糖量高的麦片？这就是用户的实际满意度。人们期望在谷物食品货架上看到糖炸弹谷物食品，而超市则满足了用户的这一需求。
我经常看着麦片货架上的果圈，心想：“谁吃那些东西？”显然，很多人都这样做，这就是为什么这个盒子会出现在超市货架上——因为人们希望在那里看到它。
谷歌正在做和超市一样的事情。谷歌正在展示最有可能让用户满意的结果，就像谷物食品货架一样。”
满足用户需求的垃圾网站的一个例子是一个流行的食谱网站（我不会透露名字），该网站发布了一些不真实的易于烹饪的食谱，并使用诸如罐头奶油蘑菇汤之类的快捷方式作为成分。我在厨房里很有经验，那些食谱让我感到畏缩。但我认识的人喜欢这个网站，因为他们真的不知道更多，他们只是想要一个简单的食谱。
帮助性对话的真正目的是了解在线受众并为他们提供他们想要的东西，这不同于为他们提供他们应该想要的东西。在我看来，了解人们想要什么并将其提供给他们，搜索者就会发现有用的东西，并敲响谷歌的帮助信号钟。
2、发布频率的增加
Illyes 和 Sassman 表示，另一件事可能会导致 Googlebot 抓取更多内容，那就是发布频率的增加，就像某个网站突然增加了发布的页面数量一样。但伊利斯表示，在一个被黑客入侵的网站的背景下，该网站突然开始发布更多网页。发布大量页面的被黑网站会导致 Googlebot 抓取更多页面。
如果我们从森林的角度缩小范围来检查该声明，那么很明显他在暗示网站内容发布活动的增加可能会引发谷歌爬虫爬行活动的增加。并不是网站被黑客攻击导致 Googlebot 抓取更多内容，而是发布内容的增加造成的。
加里 (Gary) 在此处引用了作为 Googlebot 触发器的大量发布活动：
“……但这也可能意味着，我不知道，该网站被黑客入侵了。然后有一堆让 Googlebot 兴奋的新网址，然后它就会消失，然后疯狂地爬行。”
许多新页面让 Googlebot 兴奋不已，“疯狂”地抓取网站就是其中的要点。无需进一步阐述，让我们继续。
3、内容质量的一致性
加里·伊利斯接着提到，谷歌可能会重新考虑网站的整体质量，这可能会导致抓取频率下降。
加里是这样说的：
“……如果我们爬行不多或者爬行速度逐渐减慢，这可能是内容质量低下的迹象，或者我们重新考虑了网站的质量。”
加里说谷歌“重新考虑了网站的质量”是什么意思？我的看法是，有时，如果网站的某些部分未达到与原始网站质量相同的标准，则网站的整体网站质量可能会下降。在我看来，根据我多年来所看到的情况，在某些时候，低质量的内容可能会开始超过优质内容，并拖累网站的其余部分。
当人们来找我说他们遇到了“内容同类相食”的问题时，当我查看它时，他们真正遇到的是网站另一部分的低质量内容问题。
如果网站内容是静态的，既没有改善也没有变得更糟，只是没有改变，是否会产生影响。加里拒绝给出答案，只是说 Googlebot 返回检查该网站是否发生了变化，并表示如果没有变化，“可能”谷歌爬虫可能会减慢抓取速度，但他对这一说法进行了限定，称他没有确切知道。
未提及但与内容质量一致性相关的事情是，有时主题会发生变化，如果内容是静态的，那么它可能会自动失去相关性并开始失去排名。因此，最好定期进行内容审核，看看主题是否发生了变化，如果是，则更新内容，以便在用户、读者和消费者就某个主题进行对话时，内容继续与他们相关。
改善与谷歌爬虫抓取频率的三种方法
正如 Gary 和 Lizzi 所明确指出的那样，这并不是为了让 Googlebot 爬行而对其进行攻击。关键是要考虑您的内容及其与用户的关系。
1、内容质量高吗？
内容是否涉及主题或关键字？我认为使用基于关键字的内容策略的网站在 2024 年核心算法更新中受到了影响。基于主题的策略往往会产生更好的内容，并通过算法更新进行。
2、增加内容发布活动
这可能会导致 Googlebot 出现得更频繁。定期发布内容都是一件好事，而且一直都是一件好事。在内容发布方面，不要存在“设置好后就忘记它”的情况。
3、内容质量的一致性
随着时间的推移，内容质量、时事性和与用户的相关性是一个重要的考虑因素，并将确保谷歌爬虫将继续过来打招呼。这些因素（质量、话题性和相关性）中的任何一个下降都可能影响 Googlebot 抓取，这本身就是更重要因素的症状，即 Google 算法本身如何看待内容。
