清晰、可执行的结果
- 最终 HTTP 响应、跳转目标、内容类型和抓取失败。
- robots.txt 访问规则,以及页面级 meta robots 和 X-Robots-Tag。
- Canonical 是否存在,以及页面指向自身还是另一个 URL。
批量检查最多 20 个网址的响应状态、跳转、robots 规则、noindex 与 Canonical 信号。
每行一个页面,最多 20 个。
HTTP、跳转、robots、noindex 和 Canonical 会一起检查。
页面能否收录取决于多种信号是否一致。此检查会读取公开响应,把 HTTP 状态、跳转、robots、noindex 和 Canonical 提示放进同一份诊断。
测试响应中没有发现直接阻止信号。搜索引擎仍会根据内容价值、独特性、发现情况等决定是否真正收录。
robots 或 noindex 指令阻止了正常收录。应先修复对应信号,并在线上页面变更后再请求验证。
跳转、非 200 响应或指向其他 URL 的 Canonical,可能让测试 URL 被合并或忽略,而不是独立收录。
具备条件只表示没有检测到直接屏蔽。发现路径、抓取资源、重复内容、质量、内链和搜索需求仍会影响收录决策。
对可收录页而言,自引用 Canonical 通常是有益的一致性信号;重复变体则应指向首选 URL。