一条未收录 URL 没有进入 Google 搜索时,最容易被分配的任务往往是“再提交一次”。这会让开发、内容和业务负责人一起等待一个按钮,却没有人能回答:Google 当前看到了什么、我们希望保留哪个版本、这页是否值得作为一个独立的买家入口。真正可执行的收录优化,先把一条 URL 放进可复查的分诊记录,再决定谁处理什么。
先建一张 URL 分诊表:没有记录,就没有收录优化
对 B2B 网站,关键 URL 应同时记录整体状态、抓取信息、Google 选择的代表 URL、页面任务和复查日期,才能把收录问题交给正确角色。TimZhang 踢木桩把这一步视为页面资产分诊,而非单纯的技术工单:这个表只收录会影响采购或询盘判断的产品页、应用页、服务页和技术资料页;不要把整站导出的每个筛选页、站内搜索页都当成必须收录的资产。
在已验证的网站属性中,Google 的 URL Inspection 是检查单一网址搜索状态的官方入口。即使 URL is on Google,它也只表示该 URL 具备出现在搜索结果中的资格,并不等于它会因目标查询获得可见位置。Google 的官方工具说明支持这一判断。

- 先确认要检查的是不是正确 URL 与正确版本。
- 再确定阻碍出在抓取、页面指令,还是规范版本。
- 技术信号正常后,才判断页面是否有独立买家任务。
- 只有完成修复且值得保留的页面,才进入重新抓取与复查。
| 记录项 | 检查位置或证据 | 异常时先做什么 |
|---|---|---|
| 整体状态 | URL Inspection 顶部状态;检查日期 | 先确认是否真的未收录,而不是低排名或查错 URL。 |
| 抓取与渲染 | Page indexing 的 Crawl;View crawled page;响应与 robots | 交给开发查访问、指令、响应头或前端渲染。 |
| 代表版本 | Google 选择的代表 URL、页面声明的规范指向、sitemap | 统一版本信号,决定合并、重定向或保留替代页。 |
| 页面任务 | 读者角色、采购问题、独有事实、下一步 | 交给内容和销售决定重写、合并或暂不投入。 |
如果团队无法判断一条 URL 属于技术阻断、版本冲突还是页面任务重复,应先把这些字段和业务用途放在同一张清单里核对;可先诊断网站的收录与承接断点,再决定修复优先级。
表中还应增加“负责人”和“下次复查日期”两列。否则“已修复”只会停留在口头状态:开发以为改了模板,内容以为补了文字,销售以为已有可发链接,却没人再次查看 Google 看到的是不是同一个页面。
第一步:先确认它是未收录,还是只是没有排到你搜索的位置
先在 Google 中按域名与完整 URL 做辅助检索,再在已验证的网站属性中输入完整 URL。Google 对搜索工作方式的说明强调,抓取、索引和展示都不是对每一页面的保证。这条官方边界意味着“没有看到页面”应先确认对象和状态,而非直接要求重新抓取。
正常情况是:URL Inspection 显示该 URL 在 Google 上,且它确实是你想检查的规范版本。异常不只包括 URL is not on Google;如果工具显示的是替代版本、你检查的是带参数地址,或 site 查询已经有结果但业务关键词没有曝光,处理方向就不同。前两种继续查版本和索引,后一种应转向搜索意图、页面内容和排名表现,而不是给开发新增“收录任务”。
这一步的输出不应是“有问题/没问题”,而应是一个明确标签:未进入索引、已索引但版本不对、已索引但搜索表现弱,或不应独立索引。只有第一类和第二类进入本篇后续操作;第三类需要另做页面与查询诊断,第四类应从 sitemap 和页面资产清单中移出。
第二步:在 URL Inspection 依次看四类字段,而不是只点“请求编入索引”
URL Inspection 的价值不在“Request indexing”按钮,而在它把发现、抓取、索引/规范版本和增强项拆开呈现。官方的工具说明可用来核对这一界面范围。先读整体状态,再展开 Page indexing;每看完一类字段就填写分诊表的“证据位置、异常、负责人、动作”四列。这样,工具信息才会变成可交接的工作,而不是截图留档。
先看发现:页面是通过 sitemap、站内链接还是其他路径被 Google 发现?重要页面在 sitemap 中却没有自然站内入口时,不要把 sitemap 当成唯一通路。站内路径既帮助爬虫理解关系,也让真实买家能从产品、应用和资料页之间继续完成判断。发现字段正常,并不代表后面的抓取和规范版本正常。
抓取与渲染:Google 看到的页面是否和你发布的一样
展开 Crawl 后,先记录报告给出的原因、最近抓取时间和抓取是否允许;能使用时再打开 View crawled page,检查 Google 获得的 HTML、资源和主要内容是否与浏览器里的当前页面一致。正常不是“自己电脑能打开”,而是关键文本、产品事实和页面指令能被 Google 看到。异常时,先保留截图或响应证据,再交给开发核对 HTTP 状态、登录限制、重定向链、robots 规则和客户端渲染。
noindex 是要求搜索引擎不收录该页面的指令,也应单独检查。它可以出现在 HTML 的 meta 标签或 HTTP 响应头中;如果 robots.txt 阻止 Google 抓取,Google 也无法读取页面上的 noindex。Google 关于 noindex 的说明因此不能被简化成“删掉 robots 就会收录”。若业务本来就不希望该页进入搜索,例如内部下载、重复筛选或临时活动页,正常动作是保留限制并把它从本轮收录目标中移除。
规范版本:Google 选的 URL 是否就是你希望保留的页面
在 Page indexing 中对比 Google-selected canonical 与你声明的 canonical。Google-selected canonical 指的是 Google 实际选作同组近似页代表版本的网址;两者一致,才说明“代表版本”信号没有明显冲突。不一致时,不要先请求重新抓取。先并排比较两个 URL 的页面主题、站内链接、sitemap 是否列入、rel=canonical、重定向和读者下一步。Google 明确不建议让不同 canonical 化方法为同一页面指定不同 URL,例如 sitemap 指向一个地址而 rel=canonical 指向另一个。Google 的 canonical 指引提供了这条技术边界。
这里的输出应是一个版本决策,而非“canonical 已检查”:保留 A 并将 B 301 到 A;保留 A、B 但重写它们的角色和页面任务;或承认 B 是不应独立索引的替代版本。不同语言页、合法移动替代页和下载文件可能有自己的架构条件,不能不看站点结构就统一删除。
第三步:技术无阻断后,再决定这个 URL 是否值得独立保留
技术状态没有异常,不等于每个 URL 都应成为独立页面资产。对 B2B 网站,我会要求页面负责人回答四个问题:它服务哪个角色和采购节点?它解决的判断与相近页有什么不同?它提供了哪些可核验事实、图纸、参数、应用条件或交付材料?读者看完后应查看、下载、比较或咨询什么?四项回答都与相近页相同时,继续保留多个 URL 只会分散维护责任。
Google 建议内容首先帮助既定读者完成目标。Google 的人本内容指引并没有给出“多少字才会收录”的公式;本文的推导是:相近 B2B 页面先确定哪一页代表一个买家任务,再补足该页需要的事实,最后才决定合并、重写或保留。
例如,“某设备产品页”和“该设备在某工艺中的应用页”只有在后者能说明不同的介质、限制条件、工艺目标、验证文件或下一步时,才值得同时维护。只换标题、地区名或关键词,不会产生新的买家任务。TimZhang 踢木桩在做页面资产判断时,会先问这页能否帮助特定买家做出不同决定。需要把这类判断纳入全站页面资产时,可把收录问题放进 SEO 页面资产规划,而不是单独追逐 URL 数量。
第四步:只为完成修复的少量 URL 请求重新抓取,并设复查门槛
请求重新抓取应当是最后一步。Google 允许站点所有者或完整用户通过 URL Inspection 为少量自有 URL 请求抓取,但对同一 URL 的重复请求不会让抓取更快。Google 的重新抓取指引同样没有承诺请求后一定进入搜索结果。
在点按钮前,逐项确认:第一,页面已对 Google 可访问,关键内容能在已抓取/测试页面中确认;第二,若存在近似页,用户声明和 Google 选择的代表版本已有明确处理;第三,页面任务和当前事实已补全,或已决定合并;第四,分诊表中写有变更日期、负责人和下次复查日期。少一项,就先继续修复,不用“已经提交”关闭任务。
sitemap 的作用也应放在这个复查门槛里:它是帮助 Google 发现 URL 的提示,应列出希望出现在搜索结果中的 canonical URL,但不保证 Google 下载、抓取或使用其中 URL。Google 的 sitemap 指引解释了为什么“已提交成功”不是页面收录或页面价值的证据。
结构化数据应真实代表页面的主要可见内容;正确标记也不保证富媒体展示。Google 的结构化数据通用指南支持把它作为页面语义与展示资格的补充检查,而不是未收录 URL 的优先修复动作。
若多条关键 URL 同时出现访问、模板、canonical 和内容承接问题,优先做一次系统诊断,而不是逐页打补丁。需要改动模板、渲染或页面架构时,再考虑通过增长型建站方案处理技术基础问题。
Composite scenario:12 个 URL 如何拆给开发、内容和销售
以下为 composite scenario(综合示例;这是用于解释机制的例子,不代表单一客户项目、客户数据或结果)。它说明的不是“12 个 URL 应该怎么处理”,而是为什么同一批未收录页面不能由同一个动作解决。
把 12 个 URL 分成交付给不同角色的四类动作
一家面向海外工程采购商的中国工业设备企业,准备把 12 个产品、应用和下载资料 URL 用作自然获客入口。业务负责人希望页面尽快可发,技术人员收到的却只是“让这些页被收录”。网站已具备访问验证条件,但没有逐 URL 记录,因此没人能区分哪些页面应保留、哪些只是同一产品的替代版本。
第一次 Inspection 后,团队发现 3 个 URL 的问题在访问或抓取可见性,4 个 URL 的 Google 代表版本指向同一产品页。剩下 5 个 URL 可以访问,但其中 2 个应用页没有不同的采购条件、证据文件或下一步,和产品页承担同一任务。于是清单被分成四类:技术修复、版本统一、内容重写/合并,以及暂时观察。
开发负责前三页的响应、robots 与已抓取页面;页面负责人统一 4 组近似 URL 的 canonical、sitemap 和内链信号;内容负责人和销售为应保留的应用页补足真实工艺条件、可发送资料和下一步。只有完成变更且应独立保留的 3 个 URL 被请求重新抓取,其余 URL 通过合并、重定向或重写完成取舍。
复查时,每个 URL 都要回填整体状态、Google 的代表版本、页面任务、负责人和日期,合计 9 个字段。本示例中的 12、3、4、5、2 只是综合情境的工作量说明,不是行业基准、客户成果或 Google 的索引承诺;它的价值在于把“未收录”从一个催办词变成可验证的交接流程。
当你的团队已找出一批需判断的关键 URL,但还没有统一的字段、负责人和复查顺序时,TimZhang 踢木桩建议查看收录基础诊断工具。
常见问题
URL is on Google 后还需要继续做收录优化吗?
不一定。这个状态说明 URL 有资格进入 Google 搜索,但没有回答它是否匹配目标查询、页面是否承担正确买家任务,或搜索结果中的点击与询盘是否合格。若索引正常而业务查询表现弱,应转去检查搜索意图、标题承诺、页面事实和内部承接,而不是继续请求重新抓取。判断时还要确认查询触发的是这条 URL,而不是同主题的另一条页面,否则很容易把排名问题误作收录问题。
Google 选的代表版本和自己设置的不一致时怎么办?
先确认这两个 URL 是否本来就应该服务不同读者任务。若不应不同,统一 rel=canonical、sitemap、内链和重定向信号;若应不同,则把角色、标题、事实和下一步写出真实差异。不要用 robots.txt 处理 canonical 冲突,也不要在两个版本还互相矛盾时请求重新抓取。变更后应回到 URL Inspection 核对 Google 选择的代表版本,而不是只查看页面源码中的一条标签;同时更新分诊表中的变更日期和复查人,避免下一位负责人又按旧版本判断。
请求重新抓取后,多久能看到状态变化?
没有固定时间。对同一 URL 反复请求不会让抓取更快,因此复查计划应记录“修复了什么”和“准备重新检查什么”,而不是承诺某一天必然收录。若状态迟迟未变,重新核对技术证据、代表版本和页面独立价值,而非无差别增加提交频率。只要修复尚未在可抓取版本中生效,就没有理由用新的请求掩盖未完成的技术或内容工作。
结构化数据能让页面一定被收录吗?
不能。结构化数据应真实代表页面的主要可见内容;正确标记也不保证富媒体展示。它可以帮助搜索引擎理解页面表达的实体或属性,却不能替代可访问性、代表版本和页面独立任务的检查。遇到未收录 URL 时,应先完成前三项判断,再决定结构化数据是否有必要补充,顺序不能倒置。若主要正文、参数或证据文件本身仍不完整,先补页面事实比新增标记更能解决读者与搜索引擎都无法理解的问题。
