国研乡村振兴系统
微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。
案例介绍
本项目对全国的乡村振兴数据进行收录、计算而后产出可视化页面。
其中数据的收录途径有三个:
1.文件上传
2.api获取
3.爬虫获取。
其中我负责的爬虫获取这块。使用jsoup + htmlunit来完成爬虫工作。
为确保爬虫任务不会受到系统重启这类因素影响，所以使用redis中的set集合设计了一个简单的爬虫任务调度器。
遇到过得问题：通过hanlp和hash方法解决了数据录入之后存在区划数据缺漏问题。
责任描述：
负责接口文档编写；线上环境维护；编写爬虫进行数据采集、补全；试点示范乡村画像的后端开发工作；数据库设计；
其中数据的收录途径有三个:
1.文件上传
2.api获取
3.爬虫获取。
其中我负责的爬虫获取这块。使用jsoup + htmlunit来完成爬虫工作。
为确保爬虫任务不会受到系统重启这类因素影响，所以使用redis中的set集合设计了一个简单的爬虫任务调度器。
遇到过得问题：通过hanlp和hash方法解决了数据录入之后存在区划数据缺漏问题。
责任描述：
负责接口文档编写；线上环境维护；编写爬虫进行数据采集、补全；试点示范乡村画像的后端开发工作；数据库设计；
国研乡村振兴系统
联系该工程师
微信扫码，建群沟通
案例介绍
本项目对全国的乡村振兴数据进行收录、计算而后产出可视化页面。
其中数据的收录途径有三个:
1.文件上传
2.api获取
3.爬虫获取。
其中我负责的爬虫获取这块。使用jsoup + htmlunit来完成爬虫工作。
为确保爬虫任务不会受到系统重启这类因素影响，所以使用redis中的set集合设计了一个简单的爬虫任务调度器。
遇到过得问题：通过hanlp和hash方法解决了数据录入之后存在区划数据缺漏问题。
责任描述：
负责接口文档编写；线上环境维护；编写爬虫进行数据采集、补全；试点示范乡村画像的后端开发工作；数据库设计；
案例图片
相似案例推荐
-
食客
食谱小程序，用户可在上面进行查看各类食谱，并且能够上传自制食
-
DICT项目管理平台
业务背景： 中国移动 DICT 业务快速发展，但当前系统
-
智慧大屏领导看板
使用vue/echarts构建数据统计展示平台，echart
-
未来社区小程序
依据省市未来社区建设要求设计开发，协调整合已有资源，接入社区
-
未来社区
依据省市未来社区建设要求设计开发，协调整合已有资源，接入社区
-
HY-DAMS数字档案馆管理系统
根据档案馆档案工作业务特点，系统采用领域驱动设计（DDD），
1小时精推人才
需求方专属客服，免费梳理匹配
扫码加微信 · 客服人工对接
