推荐
联盟啦广告联盟评测网通告:请注意分辨评论内容、评论者IP及地址,以免被枪手迷惑。
robots.txt 规则检测分析
robots.txt 检测工具说明:robots.txt是站长控制搜索引擎蜘蛛抓取范围的第一道闸门,写错一行就可能让整站或重要目录不被收录。本工具按主流引擎的最长路径匹配优先、同长度Allow优先原则解析,支持*通配符与行尾$结束符,输入路径即可判定允许还是禁止抓取,并列出全部命中规则。规范性检查覆盖Sitemap声明、路径以/开头、字段小写、重复UA分组等常见失误。判定结果仅供参考,站长上线前建议再用各搜索引擎官方检测工具复核。