为了适应用户的习惯,社交内容平台往往是终端多样化的,包括平板、手机和PC端。之前的多服务器架构已经不能满足要求。必须要采用前端和后端的隔离设计。该项目包括:用户管理、文章管理、自媒体管理等模块-----需求文档。项目文档 行业电商 我的职责 1. 整个项目采用前后端完全分离的架构; 2. 基于Vue来开发前端,并且兼容各种终端平台; 3. 基于RabbitMQ采用生产者和消费者设计模式; 4. 海量小文件的存储方案采用FastDFS; 5. 支持基于Elasticsearch的全文检索功能; 6、完成CORS跨域访问的问题; 7、完成基于Docker和Nginx的服务器部
通过模拟登录,代理池的方式,构建分布式微博爬虫平台,多机器进行数据采集,对所有微博用户的信息进行遍历式的采集,包含用户的个人信息、用户的微博信息、不同用户直接的关系,根据不同的接口完成整站数据的内容采集。 行业爬虫 整个项目包含从网站模拟登录,带代理池构建,url去重,页面数据规则解析所有的代码内容全部 独立完成。
为了适应用户的习惯,社交内容平台往往是终端多样化的,包括平板、手机和PC端。之前的多服务器架构已经不能满足要求。必须要采用前端和后端的隔离设计。该项目包括:用户管理、文章管理、自媒体管理等模块-----需求文档。项目文档 行业电商 我的职责 1. 整个项目采用前后端完全分离的架构; 2. 基于Vue来开发前端,并且兼容各种终端平台; 3. 基于RabbitMQ采用生产者和消费者设计模式; 4. 海量小文件的存储方案采用FastDFS; 5. 支持基于Elasticsearch的全文检索功能; 6、完成CORS跨域访问的问题; 7、完成基于Docker和Nginx的服务器部...
通过模拟登录,代理池的方式,构建分布式微博爬虫平台,多机器进行数据采集,对所有微博用户的信息进行遍历式的采集,包含用户的个人信息、用户的微博信息、不同用户直接的关系,根据不同的接口完成整站数据的内容采集。 行业爬虫 整个项目包含从网站模拟登录,带代理池构建,url去重,页面数据规则解析所有的代码内容全部 独立完成。...
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如该工程师当前档期不合,也可免费为您推荐相似候选人