Node.js和MongoDB实现简单日志分析系统
在最近的项目中，为了便于分析把项目的日志都存成了JSON格式。之前日志直接存在了文件中，而MongoDB适时闯入了我的视线，于是就把log存进了MongoDB中。log只存起来是没有意义的，最关键的是要从日志中发现业务的趋势、系统的性能漏洞等。之前有一个用Java写的分析模块，运行在Tomcat下。实现相当的重量级，添加一个新指标的流程也比较繁琐，而且由于NFS的原因还导致分析失败。一直想改写，最初想用RubyOnRails，可是一直没有时间学习和开发（在找借口啊！）。在杭州QCon2011上又遇到了Node.js，虽然之前也听说过，但是没有深入研究，听了淘宝苏千的演讲后，当时了就有要用Node.js实现这个日志分析系统的想法。前端用JS，服务器用JS，就连数据库的Shell都是JS，想想就够酷的——当然最关键是代码量小。
一、用Node.js实现服务器端代码
为了有良好的风格和快速的代码编写，不可避免地应该采用一个简单的框架。Express实现了大部分的功能，可是好需要花一定时间熟悉，并且看起来对这个项目来说有些重量级。在Node.js的官网上有一个聊天的Demo，这个代码简单移动，封装了对URL的处理和返回JSON。于是我就直接使用了fu.js，重写了server.js：
HOST=null;//localhost PORT=8001;
varfu=require("./fu"), sys=require("util"), url=require("url"), mongo=require("./request_handler");
fu.listen(Number(process.env.PORT||PORT),HOST);
fu.get("/",fu.staticHandler("index.html"));