如果发现有好多机房的IP过来爬网站内容,可以利用Cloudflare的WAF规则,将特定机房的IP阻止掉。

登陆Cloudflare,点击安全性,找到WAF,点击自定义规则,创建一条新规则。或者与现有的规则合并也可以。

以下是一个Block的案例:

字段选择ASN

运算符:包含以下各项

值:手动输入ASN的号码

选择操作:如果想直接阻止就选择“阻止”

上述机房AS的解释:

AS16276 OVH

AS24940 Hetzner

AS20473 Choopa/Vultr

AS14061 DigitalOcean

AS63949 Linode

AS9009 M247

AS45102 Alibaba

AS45050 Tencent

AS136052 PT Cloud Hosting Indonesia

AS209366 Semrush

AS46606 EIG

AS16276 OVH

AS12876 Online SAS

AS53667 BuyVM

AS24940 Hetzner

AS43146 Reg.ru

AS136052 PT Cloud Hosting Indonesia

AS61317 DET Global

AS49532 Serverhub

AS37963 Alibaba Group

AS55990 Huawei Cloud Center

AS14061 Digitalocean

AS45090 Tencent

AS55045 TekTonic

AS20473 Choopa

AS63949 Linode

查询AS可以使用这个网站:bgp.he.net