查看所有工具

Robots.txt 测试器

允许抓取

🔒
聚焦 SEO 检查
SEO 工具会把页面、标签或规则转换成可复制、可验证或可预览的具体结果。
⚡
快速流程
  1. 输入目标 URL、元数据或规则。
  2. 生成或验证 SEO 输出。
  3. 复制结果，并继续检查 robots、sitemap、canonical 或社交标签。
💡
使用建议
建议按顺序处理：元数据、canonical、robots、sitemap，然后是社交预览和结构化数据。
建议下一步
继续使用常和当前任务搭配的工具。
🧭
下一步
Robots 规则冲突可视化器
可视化 robots.txt 中 Allow 与 Disallow 对指定 URL 和爬虫的最终生效规则。
🕷️
下一步
Robots 抓取预算顾问
勾选页面类型，生成 robots/noindex 抓取预算建议。
🚫
下一步
Noindex Nofollow 冲突检测器
上线前检查误带 noindex、nofollow、X-Robots-Tag 和 robots.txt 阻止冲突。
🧾
下一步
X-Robots-Tag Header 规划器
为 PDF、图片、下载文件等非 HTML 资源生成 X-Robots-Tag header，上线前控制索引
猜你也会喜欢
随手挑几件趁手的工具
🌍
DNS 查询
查询域名DNS记录
🔎
SERP 标题描述预览器
预览 Google 风格搜索结果标题、描述、URL 展示、像素宽度、截断风险和移动端效果。
🔒
SSL 证书检查
检查 HTTPS 可访问性，并分析粘贴的 PEM 证书文本。
🗺️
Sitemap验证
验证Sitemap文件格式
🏗️
页面标题层级分析器
从粘贴的 HTML 提取 H1-H6，并标出跳级、缺少 H1、重复 H1 和空标题。
🖼️
图片 Alt 缺失扫描器
粘贴 HTML，扫描缺失 alt、空 alt、疑似文件名 alt、重复关键词和过长图片描述。
♻️
内容衰退更新规划器
上传 URL、日期和流量 CSV，按内容年龄和流量变化给旧文章更新优先级打分。
💳
贷款/月供计算器
估算月供、总利息、总还款和还清时间。