分类目录:Apache/Nginx

apache nginx

CDN缓存那些事

CDN是什么? 谈到CDN的作用,可以用8年买火车票的经历来形象比喻: 8年前,还没有火车票代售点一说,12306.cn更是无从说起。那时候火车票还只能在火车站的售票大厅购买,而我所住的小县城并不通火车,火车票都要去市里的火车站购买,而从县城到市里,来回就是4个小时车程,简直就是浪费生命。后来就好了,小县城里出……

Nginx使用HttpLimitReqModule模块限制特定页面的爬虫频率

最近在做SEO的时候发现线上的详情页被百度爬虫抓取的频率很高,想到了应用Nginx使用HttpLimitReqModule模块来做限制,但是又不能一刀切,目前只是想把详情页的爬虫限制下频率,首先介绍下这个模块的使用手册: 官方wiki介绍:http://wiki.nginx.org/HttpLimitReqModule 此模块能通过特定的客户端标识(如IP,UA等)来限制……