重新抓取网站

Dive into business data optimization and best practices.
Post Reply
rakibhasanbd4723
Posts: 146
Joined: Sun Dec 22, 2024 8:29 am

重新抓取网站

Post by rakibhasanbd4723 »

一个可能让您简化此过程的解决方案是将内容划分为目录而不是单个页面。例如,如果您知道您有一个仓库页面列表,请包含您的 /storeroom/ 目录并记下其中包含的页面数。或者,如果您有一个电子商务网站,请记下每个购物类别中有多少产品,并以此方式编制您的列表(尽管如果您有一个电子商务网站,我希望您自己在某处有一个产品主列表)。无论您如何减少此步骤的时间,请确保在继续执行步骤 2 之前拥有完整的列表。

2)安装预渲染
在为 SPA 执行 SEO 时, Prerender将 VNpay 数据库 成为您的最佳助手。Prerender 是一种服务,它会在虚拟浏览器中呈现您的网站,然后将静态 HTML 内容提供给网络爬虫。从 SEO 的角度来看,这是一个您可以期待的最佳解决方案:用户仍然可以获得快速、动态的 SPA 体验,而搜索引擎爬虫可以识别搜索结果中的可索引内容。

Prerender 的定价取决于您网站的大小以及提供给 Google 的缓存的新鲜度。较小的网站(最多 250 页)可以免费使用 Prerender,而较大的网站(或不断更新的网站)可能需要每月支付 200 美元以上。但是,拥有一个可索引的网站版本,让您能够通过自然搜索吸引客户,这是非常宝贵的。这就是您在第 1 步中编制的列表发挥作用的地方:如果您可以确定网站的哪些部分需要提供给搜索引擎,或者以什么频率提供,那么您可能每个月可以节省一点钱,同时仍能实现 SEO 进步。

3)“以 Google 方式抓取”
Google Search Console 中有一项非常有用的功能,称为“以 Google 身份抓取”。通过“以 Google 身份抓取”,您可以输入您网站的 URL,然后像 Googlebot 抓取一样抓取它。“抓取”会返回页面的 HTTP 响应,其中包括 Googlebot 看到的页面源代码的完整下载。“抓取并呈现”将返回 HTTP 响应,并提供 Googlebot 看到的页面截图和网站访问者看到的页面截图。

这对 AngularJS 网站有强大的应用。即使安装了 Prerender,您可能会发现 Google 仍然只部分显示您的网站,或者可能忽略了对用户有用的网站关键功能。将 URL 插入“以 Google 方式抓取”将让您查看您的网站在搜索引擎中的显示方式以及您可能需要采取哪些进一步步骤来优化您的关键字排名。此外,在请求“抓取”或“抓取和渲染”后,您可以选择为该页面“请求索引”,这可以成为让您的网站出现在搜索结果中的便捷催化剂。
Post Reply