案例介绍
系统采用java平台编写，以postgresql为存储源，采用多线程协调控制，主从结构模式； 主节点集中式存储metadata，调度、显示整个系统的运行状况，主要包括爬虫监控、周期性任务调度作业启动、DB维护、资源清理等Daemon线程； 爬虫节点执行具体的爬虫任务，主要包括心跳、任务填充、任务工作、任务完成、任务重启、任务取消、任务删除等Daemon线程； FileServer存储爬取文件，执行数据清洗等后处理过程。
系统主要采集淘宝、天猫、京东、苏宁、国美、唯品等国内top10电商平台的页面分析，主要采集平台商品信息、评论信息、邮费信息等。
案例图片
相似案例推荐
其他人才的相似案例推荐
-
客来店
主要负责客来店首页及相关后台配置页面的前端代码，以及相关接口
-
防伪溯源小程序项目
消费者通过扫描商品包装上的三维码标签，即可获知商品信息，一物
-
酒店管理系统
此项目为PMS酒店管理系统，适用于集团酒店员工使用，多角色权
-
webApp蜂行动
负责商品展示，商品分类模块，域名http://m.fengx
-
商家后台管理系统
主要对管理商品以及商品库存,计数等技术的运用,实现的项目工程
-
网上商城
采用springboot+springcloud技术进行构建
-
花毅鲜花网
花毅鲜花网是一款可购买鲜花的网站，支持鲜花全国配送，最快2-
-
微信小程序-花毅礼品优选
（查看案例请微信搜索：花毅礼品优选）花毅礼品优选是由成都成华
-
商城小程序
本人负责前端开发和框架构架 商城小程序满足商户日常的营销拼
-
潮鞋APP
潮鞋APP，是一个的卖鞋的APP，卖家上传商品后设置最低价，
-
估吗
负责产品开发周期评估、开发计划制定、项目完整开发（iOS端）
-
估吗
负责产品开发周期评估、开发计划制定、项目完整开发（iOS端）
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
