15. 工具与资源索引 · 讲者经验 · 索引卡 4

结构审计：URL、导航与爬取联合看

大型站不能只看单页，需要识别不同页面角色。

原知识点：分析海量站要同时看URL、导航、sitemap、Ahrefs Top subfolders和Screaming Frog，并区分聚合、搜索结果、分类与详情页。

执行步骤

  1. 从业务任务出发定义页面类型及其索引和导航职责。
  2. 导出URL、状态码、canonical、robots、标题、深度、入链和sitemap归属。
  3. 按稳定路径规则把URL分成首页/聚合/分类/搜索/详情/参数等类型，并对每类分层抽样。
  4. 用真实导航、内部链接图、sitemap和GSC索引状态交叉核对，检查孤页、重复与无限空间。
  5. 把异常转成具体结构规则和修复批次，返回第06或08章。

可复制工作表

站点：__；审计日：__；抓取范围/UA/渲染：__；总URL：__；排除：__
页面类型｜URL稳定规则｜代表URL｜用户任务｜索引职责｜导航/内链职责｜抽样方法/样本数｜HTTP｜canonical｜robots｜sitemap｜GSC Indexed/Live｜异常｜修复规则｜批次/回滚｜验收
首页/聚合｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__
分类/主题｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__
详情/任务｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__
搜索/参数｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__｜__
跨类型问题：孤页__｜无限空间__｜重复族__｜错误sitemap__｜内链深度__
首批范围：__；修复前快照：__；同口径复测日：__；结果：__；返回06/08章动作：__。

完整示例

已填审计（数字只属本站）：审计日=2026-08-01；抓取https://docs.example/同主机2400个HTML URL，Googlebot mobile UA、渲染开、排除staging；原始Internal/Inlinks/GSC导出均在audits/structure/2026-08-01/。
①主题聚合抽20/80：20均200、自指canonical、index,follow、sitemap有、GSC Live/Indexed一致；4页无叶子入链。②详情按流量×新旧抽30/600：29个200、1个302链；robots均允许、30个均在sitemap，5个canonical误指旧slug，GSC Live 5个选新值但Indexed仍旧值；47个孤页的完整URL、入链数0和GSC状态在orphans-47.csv，不是估算。③站内搜索随机30/900：均200、index,follow、sitemap无，GSC已发现110；改为noindex,follow且停止产生可抓参数链。④排序参数每主题1组共25组：18组canonical回无参数页、7组自指；robots允许、sitemap无、GSC中6个重复未选择规范页。
⑤分页/topics/transcription?page=2按首/中/末页抽10组：10个均200、自指canonical、index,follow、sitemap无、导航可达，GSC Indexed 6/10；职责是继续发现叶子，不合并回第一页。重复族测试=http/https、尾斜杠、大小写各20组，发现3条重定向链；无限空间测试对搜索词、排序值和空页各50次，发现搜索组合可无限生成。规则与样本分别保存pagination.csv、duplicate-families.csv、infinite-space.csv。
首批只修5个错误canonical、7个排序模板、搜索参数内链和4个聚合导航；回滚表=batch-01-before.csv。2026-08-08同口径复测：25/25排序组canonical正确、30/30搜索样本noindex、47个孤页降至43；回06章继续修结构，回08章观察Google处理，不把爬虫绿灯当索引完成。

完成清单

  • 页面类型由用户/索引职责定义，不只按文件夹命名。
  • URL、导航、抓取、sitemap和GSC证据已联合。
  • 参数、搜索、分页、孤页和重复模板有样本与规则。
  • 输出是可执行结构修复，不是单一工具健康分数。

完成后返回

使用前先过门禁

返回工具索引总览

当前官方依据

平台规则会变化，行动前以打开后的当前官方页面为准。

适用条件

先确定页面角色，再制定索引、内链和内容规则。

来源：谈谈海量 SEO 页面以及最近的一些收获