网站防爬小技巧：别让你的网站流量被悄悄薅走啦

我为啥急着研究网站防爬？被蚂蟥薅秃的痛谁懂啊

咱先唠点私藏的血泪史哈，去年我整了个分享职场小技巧的小破站，本来天天涨粉到100，那种看着后台粉丝涨的劲儿，比中了50块钱外卖红包还爽！结果突然一周，粉丝只涨了10个，我还以为平台限流了呢，直到我搜自己刚发的那篇《春招面试避坑指南》，嘿！搜出来二十多个一模一样的，连我吐槽HR的那句“这HR怕不是刚从选秀节目出来的吧”都一字不差，点进去一看，那网站连备案号都没有，纯纯是抄我的内容搞引流，连广告都跟我那模板一模一样！那叫一个气啊，后来查了才知道，这货是被“爬虫蚂蟥”给盯上了，这些玩意儿就像吸人血的蚂蟥，专扒小破站的内容，换个名儿就当自己的发，还把咱的流量给薅得精光，从那之后我就一头扎进网站防爬的坑里，踩了N多坑才搞明白，今天给你唠点实打实的干货，都是我亲测有用的！

网站防爬不是搞封建迷信，是给你的网站搭“防盗网”

第一招：给蚂蟥喂“难啃的小糖果”——行为验证搞起来

咱做网站防爬，首先得搞明白，普通的图片验证码早就被蚂蟥破解得明明白白了，我一开始瞎搞，用的那种点选图标当验证码，结果过了一晚上，后台又爬了一千多内容，气的我差点把鼠标摔了！后来查了才知道，要玩就玩带行为校验的滑动验证，不是那种一秒就能滑完的，得设置成滑动时长超过2秒才过验证，或者加个“先晃一晃再滑”的小彩蛋，别问为啥，蚂蟥批量爬的时候都是程序操作，哪有耐心等你晃两下？我现在就这么设置的，每天的爬虫量直接掉了90%，连我那做前端的朋友都说这招“土得离谱但好使”，咱做网站防爬，就是要会用这种小巧劲儿，别整那些虚头巴脑的，把蚂蟥挡在门外就行！

第二招：给网站加“隐身马甲”——User-Agent精准拉黑

网站防爬的老伙计都知道，每个爬虫蚂蟥都有个专属的“身份证”叫User-Agent，就像每个人的身份证号一样，一查一个准！我当时就把那些一看就是批量爬的蚂蟥的身份证全拉黑了，比如那种带“python-requests”“scrapy”“curl”标识的，这些玩意儿都是专业蚂蟥的标配，留着干啥？留着薅咱的流量？直接拉黑！我还加了个小操作，把那些频繁访问咱网站的陌生IP，连续访问超过5次的，直接标记成可疑IP，网站防爬就得认贼的脸，别瞎封人，不然真·访客想下载个资料都被拦了，那不是亏大了？我现在拉黑之后，每天的无效请求直接从几千降到几十，咱普通人做网站，没那么多钱买大防护，这种小操作贼顶用，绝对是网站防爬的必学项！

第三招：给文章穿“马赛克小外套”——内容混淆搞起来

之前有个搞公众号的朋友跟我说，他做网站防爬，把文章里的“薪资谈判”改成“薪酬议价”，把“offer”改成“录用通知”，结果蚂蟥扒了之后，搜不到原文章，引流就失效了，我试了！真的好使！我把我那篇《春招面试避坑指南》里的“面试技巧”改成“求职现场临场发挥的小妙招”，还加了点无关但接地气的小吐槽，比如“当年我面字节的时候，差点紧张到把简历当奶茶喝了”，结果蚂蟥爬了之后，搜我原文章的话，那些抄的内容连关键词都对不上，根本排不上号！咱做网站防爬，就得给咱的内容加点“佐料”，别让蚂蟥轻易抄走，咱的内容是咱熬了半夜写的，凭啥给蚂蟥当嫁衣？网站防爬不是要抄别人，是要守住咱的劳动成果，土味正能量说的就是咱！

网站防爬的坑我踩过，给你避了！这些雷别碰

说到网站防爬，我踩的坑能绕我那小破站三圈了！比如我一开始瞎装了个号称“最强防爬”的插件，结果把正常访客的手机都拦了，还有个阿姨找我下资料，半天进不来，后来投诉到我邮箱，尴尬得我连夜把那插件卸了！所以咱做网站防爬，别听那些“最强”“永久免费”的瞎忽悠，就找那种轻量的、针对小破站的插件，比如WordPress的话就装那种“简单防爬”的小插件，别整太复杂的，不然反而把自己绕进去！还有啊，网站防爬不是要把所有访问都挡住，真·访客是咱的衣食父母，咱得区分开，别为了防蚂蟥，把自己的饭都断了，这才是网站防爬的核心要义——咱防的是吸血的玩意儿，不是真心来看内容的朋友，这一点真的别搞反了！

网站防爬不是结束，是咱小破站的“成长必修课”

现在我那小破站，做网站防爬之后，一周涨粉到80了，虽然不如之前的虚流量，但都是真·爱逛职场干货的小伙伴，还有几个粉丝给我发私信说“你的文章比抄的那篇更实用”，那种成就感，比赚了500块钱还爽！网站防爬真的不是啥高大上的技术，就是咱普通人搞网站的必备技能，毕竟咱没大厂的技术团队，也没那么多预算买防护，靠自己的小妙招守住咱的劳动成果，就够了！网站防爬，不是要把蚂蟥全打死（当然如果能打死更好），是要给咱的小破站搭个不起眼的小围栏，不让野狗随便抢！咱做网站防爬，从来不是为了跟谁对着干，就是为了让咱的每一篇文章，都能被真正需要的人看到，而不是被那些吸血的蚂蟥薅走换广告！最后给咱自己打个小气：咱普通人的网站，咱自己守，网站防爬，从我做起！