在线robots文件检测工具

在线robots文件检测工具

更新日期:2021-03-09

查看次数:35478

使用次数:11338

编辑寄语:

工具介绍

使用这个工具,请把robots.txt里的汉字注释清除,它识别不了汉字。

站内容不想被百度抓取时,可配置Robots文件,检测通过后,百度将对Robots文件内容及时屏蔽抓取。

相关文章

发表评论

友情链接

  • SEO培训
  • 搜外友链