干得漂亮!妙招阻挡 AI 爬虫访问网站!笑死 ~
当前位置:点晴教程→知识管理交流
→『 技术文档交流 』
各位做网站的朋友们,大家是不是很讨厌那个 AI 机器人访问你的网站,流量出现飚升这种让人愤怒的事情? 经常有这种事情发生。有时候一些 AI 机器人劲儿很猛,一小时给你干几个 GB 的流量,气煞我也! 不过,我今天在外网溜达,发现了一个相当优雅的解决方案,我不仅笑出了猪叫,妙啊!妙啊! 这个大佬想了一个办法,在网页中加入一个肉眼不可见的链接,凡是访问该链接的 IP 地址一律自动封禁。 干净利落,思路清晰,一下子把这个问题在很大程度上解决了。 博客原文: https://shkspr.mobi/blog/2026/11/blunt-banhammer-blocks-basic-bots-ballistically/ 《直截了当的封禁之锤以弹道式手段拦截基础机器人》
这个大佬很惨,它的一个站点,被一个没有良心的 AI 机器人去爬数据,怕了 2.5TB 的数据.... 恐怖。 然后他就在网站根目录里搞了一个名为 honeypot(蜜罐)的文件夹,然后里面写了个 PHP 文件。 一旦有东西访问这个 PHP 文件,那么就会把它的 IP 地址写进 .htaccess 文件(相信大家都知道这是什么文件吧),以禁止这个 IP 再访问。 换言之,谁访问这个页面,谁就被拉黑了,哈哈哈。 当然,这个 PHP 文件的链接,放到了 robots txt 里了,并标记为 disallow ,正经活人是不可能访问它的吧,访问的只有机器人了,一看是 disallow ,肯定想看看怎么回事,一来,就被拉黑了。 同时,这个 PHP 文件的链接,也会放到 页面的 HTML 代码里。不过是隐蔽的地方,并且在不修改 CSS 的情况下看不到,无法点击。但是 AI 机器人能看到。 额... 那 SEO 怎么办呢?手动提交就好了,而且搜索引擎的机器人它其实每次的 IP 都不一样,所以有影响,但不是很大。 这个巧妙的办法的源码,放到了这个文章里,感兴趣可以试试。 作者说,这个办法运行了一个星期,已经屏蔽了 400 多个 IP ,可能不是很多,但是被攻击的流量,限制下降!
嘿嘿嘿嘿嘿,干得漂亮!!! 阅读原文:原文链接 该文章在 2026/11/17 18:01:37 编辑过 |
关键字查询
相关文章
正在查询... |