高速公路ETC入深圳-大数据分析 通过调用深圳市政府数据开放平台接口获取数据，利用大数据技术研究深圳市高速公路的运营情况，对数据进行汇总分析，探索对于高速收费站的优化方向。 感谢极客青年的深圳地铁大数据分析项目和尚硅谷的所有视频教学！！！

日志实时分析系统，SpringBoot+ES7架构，异常报警，图表展示，后台管理。

Mapreduce对csv文件数据进行价格排序处理

本开源项目内容包括埋点数据上报、nginx环境配置、Flume解密和日志格式处理、将明文数据存放到kafka的Topic下、Flink消费后将埋点数据存入HDFS、数据分析展示，各种报表展示等关键操作。为方便前期埋点的校验调优，在kafka环节，增加了埋点解析数据JSON格式存入MySQL。后续计划增加友盟和其他SDK厂商的埋点处理，以及业务系统日志的采集入库。

本仓库代码为基于Spark的健康监测管理系统的数据清洗与数据分析部分，数据清洗部分使用RDD，分析部分综合使用sparksql与RDD，最终转为DataFrame进行计算，因网络上可供参考的文献、项目等较少，本项目为从事大数据开发的人员提供参考，若有价值，还请star