(一)数据分析服务平台
该平台主要针对公司业务场景,统计相关运营指标,包含三个服务:
① 数据抽取分析服务:定时从Oracle库抽取相关数据到HDFS上,使用Sqoop2进行数据的抽取与过滤,Hive2统计相关数据指标存入Mysql及Redis,提供数据支撑。
② 数据权限WEB服务:采用SpringBoot框架快速开发,集成用户角色及资源权限,提供外部接口,查询Mysql和Redis,返回对应数据指标数据。
③ 前端展示服务:采用Vue框架及element-ui,实现前后端完全分离,请求Web服务,进行数据页面展示,Echarts图表展示,并提供Excel导出功能。
(二)新华睿思数据云图分析平台
该系统通过对新闻、论坛、微博、微信、新闻客户端、境外、报刊、评论等多种类型数据的大规模采集、推送、处理,从而为后续信息的监测、分析、研判提供强大的数据支撑;通过信息化手段实现对涉新华社网络舆情的全面实时监测、分析研判,实现对敏感信息、突发事件和网络舆论热点的及时跟踪发现、深入挖掘、全面统计分析、快速预警,辅助工作人员进行科学研判和撰写舆情报告。通过集成创新的方式统筹构建一个具有新华网特色的大数据信息监测与分析服务平台通过该服务平台的建设,为政企客户提供全面的信息监测、热点推荐、事件追踪和分析报告等基础服务。
(三)证监会互联网信息采集及舆情监测系统
该系统采用“本地自采”+“数据推送”模式,采集范围包括国内外各大主流媒体、财经媒体、自媒体等。采集到的数据将统一保存至中央监管信息平台的中央数据库中,并同时将有效信息通过原始处理、综合性处理、自然语言处理等预处理方式进行筛选。通过信息摘要、趋势分析关联分析等统计分析技术,实现舆情统计、舆情预警、专题监测、舆情浏览、舆情检索、舆情展示等基础功能,使用户在第一时间掌握网络动态,并能够对关注订阅信息或线索进行持续追踪和多维分析,辅助用户全面掌握事件或行业动态,正确进行引导,对应对突发公共事件、全面掌握社情民意起着关键作用。用户无需过多的软硬件、网络资源投入,即可充分享受“云”带来的便利,以及更好的应用效果和使用体验。