网站上线控制

Robots 规则冲突可视化器

粘贴 robots.txt,输入 URL,清楚看到哪一条 Allow 或 Disallow 规则最终生效。

最终判断允许抓取0 条命中规则
分组数0
规则数0
选中分组0
命中规则0

Robots 输入

工具会先选择最具体的 user-agent 分组,再用最长匹配路径判断最终规则。

判断链路

允许抓取

没有匹配的 user-agent 分组,默认允许抓取。

规范化路径
/private/public/report
选中 Agent
-
胜出规则
-

提醒

严重

请粘贴 robots.txt,用来展示规则匹配过程。

命中规则链路

规则按匹配长度排序;长度相同的时候,Allow 优先于 Disallow。

没有命中 Allow 或 Disallow 规则,默认允许抓取。

报告预览

# Robots 规则冲突可视化器

- User-agent: googlebot
- URL path: /private/public/report
- 选中的 user-agent 分组: -
- 最终判断: 允许抓取
- Winning rule: none

## 命中规则
- None

## 提醒
- 请粘贴 robots.txt,用来展示规则匹配过程。