Robots.txt测试工具
粘贴robots.txt文件内容和要测试的URL路径,即可查看针对指定用户代理,该路径究竟被哪条规则(如果有的话)允许或禁止访问——无需实际抓取。
SEO 与营销工具 完全在浏览器中运行
测试完全在你的设备本地完成,robots.txt 内容不会发送到任何服务器。
常见问题
是的——针对robots.txt规则测试某个URL,并检查它是否被允许或禁止访问,本质上是同一项任务。粘贴你的robots.txt内容和要检查的URL路径,即可查看具体匹配到的规则。
粘贴robots.txt文件内容和要测试的URL路径,即可查看针对指定用户代理,该路径究竟被哪条规则(如果有的话)允许或禁止访问——无需实际抓取。
测试完全在你的设备本地完成,robots.txt 内容不会发送到任何服务器。
是的——针对robots.txt规则测试某个URL,并检查它是否被允许或禁止访问,本质上是同一项任务。粘贴你的robots.txt内容和要检查的URL路径,即可查看具体匹配到的规则。