不要对 robots.txt 阻止的网页进行“noindex”;如果您这样做,noindex 将不会被看到,并且该网页可能仍会被编入索引。 使用结构化数据。 对于那些更高级的人来说,你需要了解“抓取预算”的科学原理。Gary Illyes 在这篇抓取预算博客文章中写了一篇精彩的描述。
本质上,- 其中包括: 分面导航 和 会话标识符 现场重复内容 软错误页 佐治亚州 WhatsApp 资源 面 被黑页面 无限空间和代理 低质量和垃圾内容 如何让 URL 被索引 正如我们提到的,搜索引擎机器人会抓取并索引您的内容。
但是,对于某些内容,这可能需要一段时间,尤其是在流量较低的网站上。您可以通过将站点地图提交给搜索引擎进行索引来加快此过程。 站点地图是一份向用户和搜索引擎概述或解释您网站结构的文档,以便于浏览。将您的站点地图添加到世界上最大的搜索引擎 Google 非常简单。
将您的站点地图上传到您网站的某个位置。 转到您的Google Search Console 信息中心。 在左侧边栏上,单击“站点地图”。 在“添加新站点地图”下,输入您的站点地图的地址/URL。 网站地图和索引 您还可以在 Google 搜索控制台上检查哪些页面已被编入索引,哪些页面被排除在索引之外,以及是否存在需要解决的索引错误页面。
他涵盖了影响抓取预算的因素
-
- Posts: 505
- Joined: Sat Dec 28, 2024 3:24 am