这是你所用电脑或网络的管理者设置的防火墙 。重点是防止爬虫翻墙 。主要有两个方法解除：
一、在网站管理工作中 。robots文件常常是站长容易忽略的地方 。如果robots限制生效了 。那么 。我们应该如何去解除robots限制呢？
1、修改robots限制语句 。确认蜘蛛有权限访问网站内部路径 。文档改成：
User-agent: *
【这个东西应该怎么解除,教教我？】Allow: /
2、登陆站长平台 。手动更新robots文件 。也就是通知蜘蛛 。“我的robots文件修改啦 。赶紧来看看！”
3、等待蜘蛛正式来访；实际上蜘蛛来过以后 。得知了robots限制已经解除 。但百度服务器很多 。并没有那么快全部同步 。需要等待一定实际的 。
4、后续需要监控spider的访问情况 。如果一两个月后还是没有动静 。要注意了解还有没有其它地方有robots限制 。
二、在百度上输入你要打开网页的名称搜索后 。
点了解详情进入站长工具 。
在Robots工具下面点生成robots.txt 然后再空白处以/开头输入你要打开网页的网址点创建就OK了
其他观点：
解除啥啊？？？？？？
其他观点：
不懂
推荐阅读
- 养老金具体要怎么涨 养老金上涨什么时候能落实
- 两种理财哪个更好 增额终身寿险和长期国债哪个更好
- 哪些人喜欢把钱存大银行 为什么大家喜欢把钱存在利率低的大银行
- 支付宝花呗逾期1天有事吗 花呗逾期一天会有什么后果
- 工行老年人存款规定 工行70岁以上老人存钱利率是多少
- 核酸检测做完可以直接走吗
- 除寸头外,男士有什么好打理又好看的发型？
- 外网怎么访问路由器？需要注意什么？
- 等额本息和等额本金哪个划算 等额本息和等额本金有什么区别