在 robots.txt 文件中对某些页面进行 meta-noindex 或禁止是完全可以接受的 — 事实上，这是预料之中的。这是因为索引所有内容可能意味着 Google 可能不会抓取我们所有的页面，因此他们可能不会索引我们所有的内容。这将是一个问题，因为这可能意味着我们的一些高价值、转化率最高的页面可能不会自然排名。
话虽如此，我们不应该在未进行适当研究的情况下就对电子商务网站的大量内容不进行索引。如果对大量内容不进行索引，我们就会错失关键搜索行为（例如位置、产品尺寸等）的排名潜力。
作为电子商务网站的用户或所有者，我们可能对 URL 参数 墨西哥数据 很熟悉。我们常见到这些参数的地方包括：
-
分面导航
-
产品分类
robots.txt 文件中通常会屏蔽分面导航页面和产品排序选项，但最好找出 Google 仍在向搜索者提供多少此类页面。我们可以在所选的抓取工具中选择忽略 robots.txt 规则的选项来执行此操作。或者，您可以在 Google Analytics 中按带参数的 URL 细分着陆页会话数据，以查看有多少此类参数页面正在向用户提供。然后，会话数据将用于显示这些页面的访问量。
这样做似乎有悖常理，但这些页面往往没有独特的页面内容，因为它们会有重复的标题、标题或正文内容，这意味着您可能会错过其他更重要的相关关键词排名页面。
跨模板测量网站速度
对于大型电子商务网站，仅仅测试一两个页面并将其作为整个网站的网站速度读取是没有意义的。每个页面模板的构建方式都不同。一种类型的页 人工智能中的预测是什么？ 面可能比另一种类型的页面加载速度更快——即使所有其他测试参数都相同。
跨多个页面模板测试网站速度
如前所述，有许多不同类型的模板可以组成一个成功的网站。建议对每个模板中的部分页面进行测试，以最好地了解网站的加载时间性能。
一个很好的方法是使用 PageSpeed Insights API 并将其连接到 Screaming Frog 或使用 OnCrawl 或 Site Bulb 等云工具，它们将测试您网站上每个页面的抓取速度。
要在 Screaming Frog 中执行此操作，请转到“配置”。在“API 访问”中，选择“PageSpeed Insights”，您将在那里看到包含 API 密钥的字段。
完成后，在“指标”部分，您可以选择要跟踪的设备以及您想要提取页面速度信息的报告、指标等。在下面的示例中，我们选择了 Crux 数据和 TTFB（第一个字节 最新评论 的时间）以及 LCP 和 FCP 数据。虽然抓取可能需要更长时间才能完成，但这些信息现在应该会与最终抓取的 URL 一起显示。
选择测试地点
您可以使用各种工具来测试您的网站速度，例如 PageSpeed Insights、WebPageTest 和 GTmetrix，其中大多数允许您设置测试位置。
重要的是，要从靠近数据中心（托管网站的地方）和较远的地方测试您的电子商务网站。这样做可以让您了解真实客户对您的商店的体验。
如果您安装了 CDN（例如 Cloudflare），这也很有用，因为它可以让您了解 CDN 对您的网站有多大影响以及它如何帮助您的网站更快地加载。
无论您决定从哪里进行测试，请记住每次测试时保持这些位置相同，以便获得准确的结果。