详情页
文章资讯
PPT模板
办公模板
表格模板
简历模版
安卓软件
苹果软件
网站模板
网站插件
首页
网站模板
软件
资讯
资料
PPT模板
办公模板
模板插件
表格模板
专题
首页
>
网站日志出现大量baiduboxapp很多UA都是oppo A33和华为荣耀AL00
网站日志出现大量baiduboxapp很多UA都是oppo A33和华为荣耀AL00
时间:
2023年10月14日
编辑:
佚名
问题描述:我想咨询下这个是真实用户还是百度蜘蛛呢?还是被CC了或者被爬虫了,一分钟多达几十个,都是oppo A33和华为AL00,也不太像普通用户访问吧?经常性把服务器CPU弄的爆满了,最后我在防火墙把这两个UA给屏蔽了,返回状态变成403,然后CPU能好些了,这样屏蔽会不会影响收录和排名啊?
如果是百度app,就不用屏蔽了,我的服务器也是这样,就这个UA的 ,现在还有谁会去用这个古董机呀,屏蔽了。
相关文章
查询nginx日志状态码大于400的请求并打印整行
Python中的logger和handler到底是个什么?
python3拉勾网爬虫之(您操作太频繁,请稍后访问)
xpath 获取meta里的keywords及description的方法
python向上取整以50为界
scrapy xpath遇见乱码解决
scrapy爬取后中文乱码,解决word转为html 时cp1252编码问题
scrapy采集—爬取中文乱码,gb2312转为utf-8
猜你需要