发表于

如何屏蔽不良爬虫访问你的WordPress站点

不良爬虫的危害

新站很普遍的问题是异常流量,开站不久,有时候甚至是当天,PV就成百上千,夸张点的甚至上万,但UV却只有个位数。

不良爬虫首先是一个安全问题,这类流量多半包含对网站的嗅探,看有没有网站漏洞可利用,如忘记打得补丁;或者用户粗心大意到什么程度,如用过于简单的后台登陆密码。

有些爬虫采集网站内容,是赤裸裸的盗窃行为,也有的专门采集邮箱地址等可以拿来做营销的隐私数据。

无效流量自然占用主机资源,应该控制到最小,浪费主机资源可能导致正常用户访问响应变慢,也可能影响搜索引擎优化,因为网站响应速度是SEO的重要部分。

如何屏蔽不良爬虫访问你的WordPress站点

安装配置安全插件

首先,要意识到无效爬虫流量是一个安全问题,你的网站应该有起码的安全自动防护,比如安装并配置了WordFence这样的安全插件,可以屏蔽很多攻击,有条件或需要,可以升级到付费版本,我的经验是一个好的安全插件能免去绝大部分的安全检测修复等繁杂维护工作。

也可以考虑付费插件如Hide My WP (付费),能一次性屏蔽掉wordpress网站后台关键页面(如登陆地址),让多数嗅探彻底失效。

安装配置反采集爬虫插件

这类插件已经包含了互联网上已经发现的采集爬虫,有的也具备根据访问行为甄别出客户端是否为此类爬虫的能力,能够很好的屏蔽绝大部分对网站内容权益侵害的企图。这类插件有:

仔细读一下这类插件的介绍,有的插件可能和其余插件会有冲突,通常情况下,用好一个就足够了。

如果有预算,或者这个对网站长期很重要,应该优先考虑付费插件,因为有长期技术支持,多数免费插件,或者付费插件的免费版本所能提供的更新,不总是能免费升级的,长远考虑,付费插件最好。

3 thoughts on “如何屏蔽不良爬虫访问你的WordPress站点

  1. 原本流量1000多的 现在就是200个流量,必须要安装一个哈

  2. 对普通人来说,是不是屏蔽鼠标右键和ctrl+c就行了?

    请教下

发表评论

电子邮件地址不会被公开。 必填项已用*标注

This site uses Akismet to reduce spam. Learn how your comment data is processed.