开源实时日志分析器

服务器上的访问日志是那种“一直都在、但很少被打开”的文件。它每一行记录一次请求：谁来的、什么时间、要了哪个地址、返回什么状态、用了多少流量。平时你只在出故障时翻它，其实它一直在默默记着另一件事——你的站点每天被谁在看、被谁在爬。这件事值得关心，是因为两类流量的性质完全不同。真实用户带来的是访问和转化，爬虫带来的是带宽消耗和请求压力。两者混在一起看总访问量，你会得到一个好看但没用的数字；把它们分开，