让我们讨论一下 GoogleBot 和“抓取预算”
Posted: Sat Dec 07, 2024 10:16 am
如果您了解搜索引擎优化实践和搜索引擎营销作为营销的一般领域，那么您可能听说过或了解 GoogleBot。
如果你不是的话，请让我给你介绍一下。
什么是 GoogleBot？
本质上，GoogleBot 是 Google 网络爬虫的代名词。该术语指的是 Google 的工具，它分别模拟桌面和移动设备上的用户并“抓取”网络及其索引网页。“模拟”Googlebot 桌面版和 Googlebot 智能手机版都会抓取网站，但它们都遵循 robots.txt 文件中的相同用户代理。
而且，实际上自从 GoogleBot 和 Google 的网站抓取出现以来，搜索引擎营销人员之间就一直在讨论“抓取预算”，这意味着 Google 可以或能够抓取你网站上的页面数量有限制。
幸运的是，谷歌的约翰·穆勒 (John Mueller) 最近对此事发表了评论。
John Mueller 解释 GoogleBot 抓取内容
在Google 最近举办的“SEO Office Hours”活动中，John Mueller 被问到：
“为什么谷歌没有抓取足够的网页？”
简而言之，由于网络规模很大（这也是轻描淡写），谷歌自然 在马来西亚使用目标联系人列表的好处 而然地、可以理解地只索引那些它希望用户访问的高质量网页，并最终拒绝索引那些它认为质量太低的网页。
此外，根据谷歌针对大型网站的开发者页面：
谷歌用于抓取某个网站所花费的时间和资源通常被称为该网站的抓取预算。
请注意，并非您网站上抓取的所有内容都一定会被编入索引；必须对每个页面进行评估、合并和评估，以确定其被抓取后是否会被编入索引。
抓取预算由两个主要因素决定：抓取容量限制和抓取需求。
超过 80% (82%) 的投票者表示，他们的预订流程让他们可以灵活地预订并稍后付款，并取消行程而无需支付任何费用。其余参与者表示，直接通过酒店网站预订可以省钱，而其他人则表示Airbnb有很多优惠。通过 Airbnb 和 Booking.com 等平台进行在线预订越来越受欢迎的另一个原因是，客户可以直接与住宿业主沟通，这有助于让他们放心。可以先预订后付款，这意味着由于旅行限制变化或个人原因，假期计划可能会发生变化。这意味着客户拥有更多的控制权，不会冒着失去金钱的风险，因为他们可以管理他们的预订，如果他们的度假提供商受到 ATOL 保护，则可以取回他们的现金。
如果你不是的话，请让我给你介绍一下。
什么是 GoogleBot？
本质上，GoogleBot 是 Google 网络爬虫的代名词。该术语指的是 Google 的工具，它分别模拟桌面和移动设备上的用户并“抓取”网络及其索引网页。“模拟”Googlebot 桌面版和 Googlebot 智能手机版都会抓取网站，但它们都遵循 robots.txt 文件中的相同用户代理。
而且，实际上自从 GoogleBot 和 Google 的网站抓取出现以来，搜索引擎营销人员之间就一直在讨论“抓取预算”，这意味着 Google 可以或能够抓取你网站上的页面数量有限制。
幸运的是，谷歌的约翰·穆勒 (John Mueller) 最近对此事发表了评论。
John Mueller 解释 GoogleBot 抓取内容
在Google 最近举办的“SEO Office Hours”活动中，John Mueller 被问到：
“为什么谷歌没有抓取足够的网页？”
简而言之，由于网络规模很大（这也是轻描淡写），谷歌自然 在马来西亚使用目标联系人列表的好处 而然地、可以理解地只索引那些它希望用户访问的高质量网页，并最终拒绝索引那些它认为质量太低的网页。
此外，根据谷歌针对大型网站的开发者页面：
谷歌用于抓取某个网站所花费的时间和资源通常被称为该网站的抓取预算。
请注意，并非您网站上抓取的所有内容都一定会被编入索引；必须对每个页面进行评估、合并和评估，以确定其被抓取后是否会被编入索引。
抓取预算由两个主要因素决定：抓取容量限制和抓取需求。
超过 80% (82%) 的投票者表示，他们的预订流程让他们可以灵活地预订并稍后付款，并取消行程而无需支付任何费用。其余参与者表示，直接通过酒店网站预订可以省钱，而其他人则表示Airbnb有很多优惠。通过 Airbnb 和 Booking.com 等平台进行在线预订越来越受欢迎的另一个原因是，客户可以直接与住宿业主沟通，这有助于让他们放心。可以先预订后付款，这意味着由于旅行限制变化或个人原因，假期计划可能会发生变化。这意味着客户拥有更多的控制权，不会冒着失去金钱的风险，因为他们可以管理他们的预订，如果他们的度假提供商受到 ATOL 保护，则可以取回他们的现金。