网站还是继续被恶意爬虫爬取数据
网站从搬到CDN上去之后,被恶意爬虫爬取就一直没停止过,详细见我两篇文章:
网站还是继续被semrush.com和mj12bot.com恶意爬虫
semrush.com和mj12bot.com恶意爬虫经常爬网站怎么办？
期间,我通过技术手段,提取出了访问超多的IP,然后将它添加到腾讯云CDN的IP黑名单中去了,刚开始的确有点效果,但是,对方一直不停的在换IP,我这边就不停的增加黑名单中的IP,由于腾讯云CDN的IP黑名单最多只能增加100个,导致现在新的恶意IP就没办法阻止了,如下图:
这些恶意IP导致我的CDN流量消费的速度激增...不知道还有没有其他的解决办法
文章不错，赞一个！(0)
满满的干货,我要赞赏
相关文章
文章评论
文章分类
随便看看
-
拼多多的一级处罚二级处罚三级处罚分别是什么？
拼多多一级惩罚一级惩罚的后果：商品移除资源位、禁止上新、移除广告。处罚时间：三天拼多多二级惩罚物流服务...
-
jquery如何hide之后再remove
hide是只是隐藏元素,只是加了一个display:none,并不会移除,而remove,则是将元素删除.但如果需要有动画效果,并...
-
腾讯云网站备案小程序:接口错误 获取图片编码失败
最近需要备案某个网站,由于服务器使用的是腾讯云,腾讯云跟阿里云一样备案也转到APP上去.但是,这不是重点,重点...
-
51aspx上传一份源码需要多久才能审核完成?
前段时间在51aspx上传了一份c#的源码,打算把它开源,然后等了大概三天左右,看到还是审核状态,我就有点奇怪了,...
-
一些"答非所问"的段子
1.问：“去相亲，对面那女的咧嘴一笑，脸上好厚一块粉掉下来了，我该怎么办？”……答：“您太客气了，第一次...
