Cloudflare的Bot Management是一个专用于识别自动化流量的服务,针对的是凭证填充、库存囤积、非法爬取、污染数据和破坏支付页等等非法爬虫带来的问题。许多WAF服务也包含了以上这些场景,Bot Management的实际缓解措施也是借助防火墙来完成的。cf的不同之处在于,他们对整个Cloudflare网络上的流量取样进行机器学习,进行行为分析,然后对请求进行打分,这一分数可以给到站长比较直观的流量视图,例如某组评分较低的请求来自于同一IP,一个IP短时间内发起了多次请求,且经确认并非搜索引擎的合法爬虫,因此站长可以结合这些数据来对这类请求发起挑战或者干脆阻止。Bot Management还包含了流量分析等等服务,cf的企业账户都集成了WAF,防DDoS和CDN等,基本上可以形成一个完整的SASE安全方案。
https://ds.fanyaozu.com/tag/%e5%90%b4%e9%a6%86%e9%95%bf
转载请注明:电商实战教程 » Cloudflare的bot管理是怎么防爬的?