从电子商务到列表网站再到房地产和无数垂直领域，您可以通过爬虫工具使用自定义提取来利用的数据在收入中是物有所值的。借助触手可及的更精细数据，您可以发现 CRO 和用户体验洞察力，这些洞察力可以为您的优化提供信息并转变您的客户体验。
在 Whiteboard Friday 的这一集中，我们很高兴欢迎 Luke Carthy 从他最近的 MozCon 2019 演讲中分享可操作的智慧，Killer CRO and UX Wins Using an google SEO Crawler。
视频转录
嘿，莫兹。这是怎么回事？哇，我能说我现在在西雅图做白板星期五真是太不可思议了吗？我迫不及待地想和你分享这些很酷的东西。所以谢谢你加入我。
我的名字是卢克·卡西。您可能会说，我来自英国，我想和您谈谈自定义提取，特别是在电子商务领域。然而，我要说的是，这在许多垂直领域也非常有效，比如房地产，在工作列表中。事实上，任何可以在网络爬虫中吐出 HTML 的网站，您都可以使用自定义提取。
什么是自定义提取？
让我们开始吧。什么是自定义提取？好吧，正如我刚才提到的，它允许您在使用 Screaming Frog 或 DeepCrawl 或任何您想使用的工具进行爬行时，它允许您抓取并提取 HTML 的特定部分并将其导出到文件、CSV、Excel 或任何您喜欢的格式。
作为一个原则，好的，很好，但我会给你一些很好的例子，说明你如何真正利用它。所以电子商务，在这里我们有一个我画得很漂亮的产品页面，红色的所有东西都是你可以提取的。虽然，正如我所说，页面上的任何内容都可以。这些只是一些很好的例子。
产品信息+页面表现
对此稍加思考。你是一个电子商务网站，你是一个列表网站，当然你有列表页面，你有产品页面。如果您能够快速、大规模地了解所有产品的定价，是否有库存，是否有图片，是否有描述，有多少评论，以及评论，总分是多少，是四星，五星，还是什么？
这真的很强大，因为你可以开始了解好的页面是如何根据他们拥有的信息，基于流量、转化、客户反馈和各种很棒的东西，所有这些都使用自定义提取并将其吐出到 CSV 上或 Excel 电子表格文件。
竞争洞察力
但是，当您开始将镜头转向竞争对手并思考如何获得这些真正好的见解时，它就会变得非常强大并且您会从中获得很多见解。你可能有三个竞争对手。你可能有一些有抱负的竞争对手。您可能有一个您不一定要与之竞争的网站，但您每天都在使用它们，或者您很欣赏他们的网站使用起来多么容易，您可以离开并这样做。
你可以开始爬行，你没有理由不能从其他竞争对手那里提取相同的信息，看看发生了什么，看看你的竞争对手以什么价格销售商品，他们是否有库存，评论是什么样的，人们有哪些常见问题解答，然后您可以在自己的内容中利用它。
如何从电子商务中的自定义提取中收集见解的示例
示例 1：竞争对手没有进货的产品涨价
让我给你一个完美的例子，说明我是如何设法使用它的。
我已经设法确定竞争对手没有特定产品的库存，因此，我能够提高我们的价格，因为他们没有出售它。我们在那个特定的时间做了，我们可以确定价格点，事实上他们没有任何库存，这太棒了。考虑一下。大规模的真正强大的见解。
示例 2：改进类别页面上的分面和筛选器
我想和你谈谈的另一个例子。分类页面，又是令人难以置信的华丽插图。所以类别页面，我们有过滤器，我们有一个类别页面，只是为了稍微改变一下，我也有一个列表页面，所以无论是，正如我所说的，房地产，工作，还是任何东西在那种环境下。
如果您再次考虑一下竞争，没有理由不能通过自定义提取来提取人们使用的最佳过滤器、顶级过滤器、人们喜欢选择和理解的顶级方面。这样您就可以查看您是否在您的站点上使用相同类型的功能和方面的组合，并可能对其进行改进。
同样，您随后可以开始了解哪些特定功能与销售、性能和影响相关，并真正开始改善您网站的性能以及对客户的行为方式。同样的事情适用于这里的两种环境。
如果你是一个列表网站并且你列出工作或你列出产品或分类广告，它们是否在顶部有位置过滤器？是可用性吗？是点评吗？是分数吗？您可以在多个领域抓取多个竞争对手，确定是否存在模式，查看主题，然后查看您是否可以利用和改进并利用它。这是您可以使用它的好方法。
示例 3：建议、建议和优化
但最重要的是，我最着迷的是到目前为止的建议。
在我之前做的 MozCon 演讲中，我有一个统计数据，我想我可以回忆起来。人们在亚马逊上购买的内容中有 35% 来自推荐，而人们在 Netflix 上观看的内容中有 75% 来自建议，来自推荐。
想想那是多么的强大。你可以抓取你自己的网站，大规模地了解你自己的推荐，确定这些推荐的库存、价格、它们是否有图像、它们的顺序是什么，然后你就可以开始构建一个关于人们什么产品的真正生动的画面与您的物品相关联。你可以在全球范围内这样做。您可以抓取整个产品组合或列表组合并获取它。
但是，再次回到强大的情报，你的竞争对手，尤其是当你的竞争对手可能有多变量方面或多变量建议时。我的意思是我们都见过有多个轮播的网站。所以你已经为你推荐了。
您可能有其他人也买了其他建议。您拥有的不同类型的建议越多，您拥有的数据就越多，您拥有的智能就越多，您的洞察力就越多。回头再说一个房地产的例子，你可能正在看这里的房产。就是这个价格。您可能不知道的主要房地产竞争对手向您推荐的是什么？
然后你可以考虑重点是否在位置上，是否在价格上，是否在卧室数量上，等等，你可以开始理解并表现出它是如何工作的，并从中获得一些真正强大的洞察力。
自定义提取是关于大规模的粒度数据
总而言之，自定义提取就是大规模的大粒度数据。它真正强大的地方在于您可以自己完成所有这些，因此无需开会、发送详细的电子邮件、获得他人的许可。
启动 Screaming Frog，启动 DeepCrawl，启动您想要使用的任何类型的爬虫，查看自定义提取，了解如何提高业务效率，了解如何获得一些非常酷的竞争洞察力，是的，希望对你们有用。非常感谢。
奖励资源：
- 使用 XPath 和正则表达式自定义提取尖叫青蛙的完整指南
- 尖叫青蛙中的自定义提取：XPath 和 CSSPath
- 如何使用正则表达式进行谷歌搜索引擎优化和网站数据提取
Speechpad.com 的视频转录
我们知道，这是一个内容丰富的话题 — 如果您喜欢本周五的白板并发现自己渴望了解更多信息，那么您很幸运！Luke 在 MozCon 2019 上的完整演示更深入地介绍了自定义提取可以为您做什么。在 MozCon 视频包中观看他的演讲以及来自我们令人惊叹的演讲者的其他 26 个前瞻性话题：
立即访问会议！
我们建议与您的团队分享它们并传播对学习的热爱。观看愉快！
