前言
前阵子写的日志分析工具NginxPulse，自开源以来，已过去2周时间，目前GitHub已收获1.5k的star。收到了不少用户的反馈建议，花了点时间将这些问题都处理了下。 
本文就跟大家分享下新版本都解决了哪些问题，优化了哪些内容，欢迎各位感兴趣的开发者阅读本文。 
抛弃SQLite
有不少用户反馈说日志文件很大的时候（10G+），解析速度非常慢，需要解析好几个小时，解析完成之后数据看板的查询也比较慢（接口响应在5秒左右）。 
于是，我重写了日志解析策略（解析阶段不做IP归属地查询，仅入库其他数据，将日志中IP记录起来），日志解析完毕后，将记录的IP做去重处理，随后去做归属地的查询处理（优先本地的ip2region库，远程的API调用查询做兜底），最后将解析到的归属地回填至对应的数据库表中，这样一套下来就可以大大提升日志的解析速度。 
数据库的数据量大了之后，SQLite的表现就有...