对于一个拥有数百万页面的网站来说，；您的爬虫将耗尽内存和空间，或者可能需要数周时间才能完成，而这对我们大多数人来说是不可行的。这就是细分的用武之地。对网站进行细分还可以让您在转向另一区域之前先专注于网站的一个区域。
对于像 这样规模的网站来说
一种常见的策略是每季度专注于一个类别，然后转向网站的另一个区域。他们通过细分才能够做到这一点。
细分产品页面
您可以通过多种不同的方式对网站进行细分，与专注于网站的其他区域相比，专注于您的产品可以帮助您更快地开始看到收入的改善。
对于产品页面，一个好的策略是查找 URL 模式，例如以 .html 结尾或包含 /product/ 的 URL 模式。
通过按库存状态对产品进行细分
还可以从产品页面获取其他维度。根据产品是否有库存来分隔页面可以帮助您确定：
有多少流量流向缺货产品。
产品的可用性和缺货是否会影响产品转化率。
详细了解哪些页面参与度指标受到库存可用性的影响。
抓取此数据时，您可以查找特定的页面元素，例如页面上缺少的价格或“缺货/缺货”消息。
尖叫青蛙配置菜单的屏幕截图
执行此操作的一种方法是从站点的架构标记中提取产品可用性属性。如果您使用的是 Screaming Frog，则可以在“自定义”>“提取”下的“配置”下拉列表中访问“自定义提取”功能，然后设置提取规则。
尖叫青蛙提取列表的屏幕截图。
细分类别页面
通过细分类别页面
您可以找到包含数百种产品的任何类别，并且可以从划分为子类别中受益。
类别页面并不总是具有特定的 URL 模式，并 按行业划分的特定数据库 且它们在不同的 CMS 中有所不同，但您可以留意那些包含 /category/ 或 /shop/ 的页面。另一个不错的选择是寻找独特的属性，例如带有显示 X 或 Y 结果的文本的属性或带有用于对产品结果进行排序的选项的页面。
结构化数据标记
我们之前看到，您可以抓取产品数据实例的页面来识别产品页面。但在继续之前，我们需要确保了解什么是结构化数据或模式标记以及它如何使电子商务网站受益。
产品标记
当您的受众搜索产品时，产品标记可以 最终使用您的 CRM 的人中仍 直接在 SERP 中提供有关您产品的更多信息。产品标记还意味着您的产品更有资格获得丰富的结果，例如轮播、图像和其他非文本元素。
产品架构可能如下所示：
产品架构代码的屏幕截图。
添加后，产品架构可以让您的受众在登陆您 阿拉伯语数据 的页面之前就看到有关您产品的有价值的信息，从而提高您的点击率！我们可以在下面的两个示例中看到沃尔玛已将产品架构添加到其产品中：
包含沃尔玛产品列表的 SERP 屏幕截图
搜索结果中的星级评分
您的产品获得的正面评价越多，客户访问您的网站并购买您的产品的可能性就越大，尤其是与竞争对手相比。
星级评分可以通过 Trustpilot 或 Reevoo 等第三方工具从产品标记中获取，也可以从页面上的客户评论中获取。