最近有一位客户遇到了一个问题:我们网站每天有很多直接访问的流量,高达10万IP。这些流量是无用的。想把它们拒绝了,要怎么设置?
操作方法很简单,进入百度云防护后台-Web防护-自定义规则

添加规则如下:
匹配条件:Referer 不存在
添加且条件:
User-Agent 不包含任一值 输入spider、bot

确认后,即可实现网站直接在浏览器输入域名是打不开的,只能通过别的网站或者搜索引擎引入才可以打开,同时访问的UA不是搜索引擎爬虫的也会拦截。 既拦截了直接访问,也不影响搜索引擎爬虫抓取。