-
百度云防护 WAF 缓存功能升级：新增”忽略源站不缓存标头”，彻底解决恶意爬虫 no-cache 绕过
百度云防护 WAF 缓存功能升级，新增忽略源站不缓存标头开关，开启后将忽略源站返回的 Cache-Control: no-store、no-cache、max-age=0 及 Pragma: no-cache 指令，按控制台规则强制缓存。彻底解决恶意爬虫通过伪造 no-cache 响应头绕过 WAF 缓存规则、刷回源量的顽疾。- 93
- 0
-
百度云防护如何添加防 CC 攻击和恶意爬虫规则？精准自定义 CC 实战教程
百度云防护"精准自定义 CC"规则可针对 URI + JA4 指纹 + 频率阈值配置，本文手把手教你添加防 CC 攻击和恶意爬虫规则，包括优先级、匹配条件、统计信息、处置动作等关键参数。- 76
- 0
-
新加坡 IP 已成恶意爬虫和 CC 攻击重灾区：百度云防护区域封禁一键拦截实战
近期主机吧多位客户反馈，服务器 CPU 和带宽突然飙升，排查后发现一个共同特征：攻击流量几乎全部来自新加坡 IP 段。少则每天几万次恶意请求，多则直接把服务器带宽打满，CPU 被爬虫和 CC 攻击吃到 100%，正常用户完全无法访问。 更让人头疼的是，这些新加坡 IP 来源极其分散——不是几个固定 IP 在打，而是成千上万个动态 IP 轮换攻击，传统的 IP 黑名单封不过来。 一、客户现场：新加坡…- 89
- 0
-
实战记录：成功为客户拦截网站恶意爬虫抓取
今早，主机吧的一位客户联系上主机吧，反馈网站偶尔出现502 Bad Gateway的情况。 然后客户查询服务器后，发现带宽CPU都偶尔满了。 而客户联系上西部数码服务商后，反馈有恶意采集等情况。 然后，主机吧通过百度云防护的请求日志发现，一个JA3指纹为8bee49baa010986785a9e74d688ed7e9的，出现同时大量的请求。 主要特点是 IP为全国各地的家用IP，每次请求的URL都…- 64
- 0
-
记录一次被User-Agent为PycURL 恶意爬虫抓取导致网站故障事件
最近，主机帮发现了一个恶意爬虫： User-Agent为：PycURL/7.45.3 libcurl/8.4.0 OpenSSL/3.0.12 zlib/1.2.13 brotli/1.1.0 libidn2/2.3.4 libpsl/0.21.2 (+libidn2/2.3.4) libssh/0.10.5/openssl/zlib nghttp2/1.58.0 OpenLDAP/2.6.5 这…- 70
- 0
-
利用百度云防护企业版拦截CC攻击、恶意爬虫、采集操作方法
今天接入到一位深受黑客攻击影响的客户求助，网站经常被CC攻击，还有大量爬虫，还有采集等情况，服务器CPU、带宽总是不够用，想要找解决办法。 在了解情况后，我们推荐客户使用百度云防护企业版： 企业版 DDOS防护：支持 CC攻击防护：支持 WEB应用防火墙：支持 WAF自定义规则：20条 Bot防护：支持（爬虫防护） 威胁情报： 支持设备情报+IP情报 API安全：支持 动静态智能加速：支持 自定义…- 326
- 0
-
京东云星盾拦截常见恶意爬虫方法
现在网上针对网站的恶意爬虫相当多，对网站造成影响非常大，轻则使网站访问卡慢，重则使服务器停止运行，而如果网站使用了CDN，还会对非常消耗CDN流量，造成财产损失，因此拦截恶意爬虫是非常重要的，使用京东云星盾可以有效拦截特定恶意爬虫抓取网站，以下是常见爬虫的拦截方法。 1.进入京东云星盾后台-安全规则 2.创建防火墙规则 规则名称：拦截恶意爬虫 字段:选User-Agent 运算符：等于 值：填写恶…- 15.2m
- 0
-
目前国内网站遭遇最多的恶意爬虫有哪几个
周末，给客户做爬虫封禁处理，总结了下以下几个非常频繁的恶意爬虫，大家可以看着封禁，只有好处，没有坏处。 以下是关于这些爬虫的介绍： GPTBot 开发商：OpenAI 发布时间：2023年8月7日 功能特点：GPTBot是OpenAI推出的一款网络爬虫机器人，该工具能够在注重版权的基础上，使用透明的方式收集网页信息，来训练OpenAI旗下的各AI模型。和其他所有网络爬虫一样，它从互联网上搜集能够用…- 12.2m
- 0
