尽管这些工具很有用,但它们都无法提供分析网站索引的完整解决方案。Google Search Console 虽然非常有用,并且无疑是我们进行大多数分析的起点,但它不支持逐个 URL 进行精细的分析,这限制了识别和纠正大规模索引问题的能力。服务器日志和抓取统计信息可以显示抓取活动,但不能保证索引,这可能会导致误解。
Google 的 URL Inspection API 虽然准确,但其每日请求数量有限,且使用繁琐,不适用于大型网站。虽然 Screaming Frog 等工具提供了出色的网站地图功能,但它们并不直接提供索引数据;Google Analytics(分析)虽然可用于监控流量,但并非索引工具。
这些工具虽然在其特定场景下很有价值,但并不能完全满足索引分析的需求。因此,必须辅以其他方法(例如印象分析),才能更全面、更有效地了解网站的索引状态。
我们的方法:使用展示次数作为索引指标。讨论“具有 SEO 价值的 URL”。
鉴于获取精准索引数据的难度,我们提出了一种替代方法:使用展示次数作为判断 URL 是否被索引的指标。也就是说:如果某个 URL 在相当长的一段时间内(2 周、2 个月、6 个月,无论您选择哪个时间段)都有展示,则意味着它已被 Google 收录,并为我们提供了价值。如果它连一次展示都没有,则说明它没有被收录,或者至少没有为我们提供任何价值。
印象数据可以轻松从 Google Search Console 中提取,然后我们可以从该工具本身、Looker Studio、Google Sheets 甚至通过 Screaming Frog 等数据交叉工具查看这些数据。
这种方法实用且与业务紧密相关,因为在合理时间段内没有展示的URL很可能不会被编入索引,或者至少对业务没有用处。为了理解这一点,让我们列出一些URL可能被编入索引但在GSC中甚至没有一次展示的原因:
- 无人搜索: 也就是说,您的网址可以响应 Google 搜索,但在您查看的时间段内,您所在的国家/地区无人搜索该关键词。因此,我们使用高搜索量时间段。有些关键词在某一天无人搜索是正常的,但如果您查看 Google 至少六个月的 Google 排名数据,就会发现无人搜索任何关键词,这表明该关键词的排名对您毫无意义。这些网址毫无价值。
- Google 会将其匿名化:这是 GSC 的一个限制。当我们请求展示次数和点击次数报告时,它会将不常见的搜索匿名化。也就是说,如果只有少数用户在 Google 上搜索了某个关键词,GSC 可能不会报告该数据,而是将其匿名化,不会告诉我们搜索的具体关键词。虽然这主要影响 GSC 的关键词,但也可能导致其将 URL 匿名化,从而窃取更多数据。但同样,我们又回到了老问题:如果这样做,那是因为这些关键词是长尾关键词,分析它们的排名毫无意义。任何排名在那里的 URL 对我们的 SEO 都几乎没有价值。
一旦您理解了 URL 与展示次数之间的关系,将展示次数与该 URL 的价值关联起来的方法的优势就显而易见了:它易于提取,可以逐个 URL 进行管理,并且与实际业务绩效密切相关。它还使我们能够了解与每个 URL 关联的关键字,这对于理解其在我们的 SEO 策略中的相关性至关重要。
然而,需要注意的是,这种方法并非万无一失,也不能完全取代已收录网址的衡量标准。虽然有展示次数的网址无疑会被收录,但已收录的网址未必能产生展示次数,这意味着即使它被收录到 Google 的索引中,对企业来说也毫无用处。
匿名化的阴影会让我们犹豫不决。这会导致分析出现问题,尤其是在拥有数千个 URL 的网站上。当我们在 GSC 上使用直接报告(通过 GSC 界面或 Looker Studio)时,这种匿名化在严重依赖长尾流量的网站上往往相当高。但是,如果您使用 GSC 与 BigQuery 的集成,这个问题就会大大缓解,从而提供更多数据用于分析,并将匿名化程度降至最低,在许多网站上几乎不存在。
两种工作方式。根据您的业务需求选择合适的方式。
一旦你理解了这个系统的工作原理,你就会发现,计算具有 SEO 价值(至少 1 次展示)的 URL 不仅简单,而且对于管理你的日常优化也非常有用。那么,我希望这个指标在我的分析中占据多大比重呢?在 IKAUE,我已经告诉你它非常重要,但其重要性并非一成不变。
在开发 SEO 指标漏斗时,我们倾向于针对每个企业做出以下决定:
- 我认为“SEO URL”与索引 URL 几乎相同?
- 或者我是否坚持认为它们是不同的东西,因此我的 SEO 渠道将具有索引 URL 的状态,然后成为有价值的 URL?
如果你选择前者,你的生活会简单得多。你可以讨论哪些URL真正有效,哪些无效。但你无疑会假设一个很小的(有时甚至不那么小的)误差范围。如果你选择后者,你总是会对正在发生的事情有更好的理解,但在某些时候你会不必要地使讨论复杂化……“是的,当然,你告诉我在这个类别中我们有40%的URL是没有价值的,但如果你不告诉我它们是否被索引,我就不想优化它们。”
怎么做呢?我无法改变每个人的信念,但我可以告诉你,在几乎所有情况下,第一种选择对我们来说都更有效。但这并不意味着我们不想计算误差幅度。