流量分析web系统,使用flume+kafka+azkaban+spark2+hive处理10w条记录每秒的数据,汇总入mysql做各种纬度统计,web使用springboot+vue。
针对flume做部分源码修改来满足业务需求。
python+scrapy+mongodb网络爬虫系统。
众包采集系统对使用mysql分表,ngnix负载均衡,开发app的api接口系统,相关的web管理平台。
视频监控管理平台使用spring,easyui,oracle,webservice,ztree,openlayer来满足视频监控及其在地图上展示各种相关数据。