百度蜘蛛

服务器日志里出现大量“Baiduspider”UA的请求，访问频率高得吓人，很多站长的第一反应是封IP。但UA是可以伪造的，直接封可能把真百度蜘蛛也一起挡在外面，导致收录停滞。百度官方推荐的方法只有一个：反向DNS解析。拿到访问IP后，用host、nslookup或dig反查，看返回的hostname是否以*.baidu.com或*.baidu.jp结尾。不是这个后缀，就是冒充。Linux下一条命