车流量监控
前言
目的1.对业务场景抽象,熟练的Spark编码2.增加自定义累加器,自定义UDF 3.Spark优化方式
项目数据处理架构
模块介绍
卡扣流量分析Spark Core
卡扣车流量转化率Spark Core
各区域车流量最高top5的道路统计SparkSQL
稽查布控,道路实时拥堵统计SparkStreaming
蜂巢表
monitor_flow_action表–日期日期天– monitor_id卡口号– camera_id摄像头编号–汽车车牌– action_time某个摄像头拍