机器人排除标准（Robots Exclusion Standard），网站使用的文本文件，用于与网络机器人进行通信，以处理网站的每个页面。在这里您可以将某些页面设置为漫游器的禁区，并仅扫描最有用的内容。
机器人排除标准
推荐关键词
最新资讯
{{title}}
点击查看更多内容
24小时热搜
-
热
- 1 沙特申博宣传片真是中国拍的 网友：这风格意境是中国的手笔
- 2 南方人东北购物被店主语气“凶哭”：文化差异导致误解
- 3 女子下班回家发现家门口被贴U盘：新型诈骗手段？
- 4 爸爸送娃撂下就走结果学校没开门：交警协助联系 安全返家
-
热
- 5 宗庆后在黄金地段为员工建廉租房：从不裁45岁以上员工 我算有钱
- 荐 2020年高通骁龙CPU排名 高通骁龙888排名领先