搜索学堂
搜索服务
互动交流
资源合作
用户中心
登录
推荐内容
创作者小课堂
工具解读
搜索规范
基础开发
智能小程序
资源提交
站点资源
快速抓取
普通收录
移动适配
死链提交
数据统计
小程序资源
流量统计
站点资源
索引量
流量与关键词
抓取频次
抓取诊断
抓取异常
Robots
搜索展现
站点子链
站点属性
站点优化与维护
网站改版
论坛
反馈中心
VIP俱乐部
合作专题
申请历史
站点管理
消息提醒
联系方式
管理员设置
安全防护
在线咨询
反馈中心
回到顶部
站点信息
资源提交
快速抓取
普通收录
移动适配
死链提交
数据统计
索引量
流量与关键词
抓取频次
抓取诊断
抓取异常
Robots
搜索展现
站点属性
站点子链
视频极速服务
优化与维护
网站改版
因您未登录,只可以浏览部分内容,查看更多,请
登录
Robots
使用说明
1. robots.txt可以告诉百度您网站的哪些页面可以被抓取,哪些页面不可以被抓取。
2. 您可以通过Robots工具来创建、校验、更新您的robots.txt文件,或查看您网站robots.txt文件在百度生效的情况。
3. Robots工具目前支持48k的文件内容检测,请保证您的robots.txt文件不要过大,目录最长不超过250个字符。
输入网站
检测
检测中,请稍等......
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
提交
校验
Q:什么是robots.txt文件?
Q:robots.txt文件的格式
Q:robots.txt文件用法举例