您当前的位置:首页 > 服务器 > 文章详情

网站还是继续被恶意爬虫爬取数据

2019-10-115551人围观

网站从搬到CDN上去之后,被恶意爬虫爬取就一直没停止过,详细见我两篇文章:

网站还是继续被semrush.com和mj12bot.com恶意爬虫

semrush.com和mj12bot.com恶意爬虫经常爬网站怎么办?


期间,我通过技术手段,提取出了访问超多的IP,然后将它添加到腾讯云CDN的IP黑名单中去了,刚开始的确有点效果,但是,对方一直不停的在换IP,我这边就不停的增加黑名单中的IP,由于腾讯云CDN的IP黑名单最多只能增加100个,导致现在新的恶意IP就没办法阻止了,如下图:


这些恶意IP导致我的CDN流量消费的速度激增...不知道还有没有其他的解决办法

文章评论

热门评论
暂无评论