Nginx日志数据的清洗,及所需数据的汇总与导出存储
需求:统计某网站的pv(网页浏览量),uv(用户量)的数据量,并存储于数据库中,以便于用户查询。 思路分析: 将logs数据导入至hdfs中存储 清洗数据获得此次需求需要的数据内容 ...
需求:统计某网站的pv(网页浏览量),uv(用户量)的数据量,并存储于数据库中,以便于用户查询。 思路分析: 将logs数据导入至hdfs中存储 清洗数据获得此次需求需要的数据内容 ...