离线建库
案例介绍
项目描述：
外派百度担任后端开发工程师一职位。负责日常运维、版本迭代与接口开发。
离线建库项目是一个基于百度paddle-cloud平台的一个定时抓取数据并对其建立索引发布的一个流式项目。
个人负责：
主要负责日常日志查看与分析。异常任务的处理与优化，需求开发，代码优化，版本迭代。
技术要点：
整体项目基于python+Hadoop+shell+paddle_cloud
基于paddle_cloud实现流式项目易于管理。
采用Hadoop集群，实现不同地区集群之间数据的快速传输
使用shell脚本来实现项目自动化
采用python来实现业务需求的处理
离线建库
案例介绍
离线建库项目
项目描述：
外派百度担任后端开发工程师一职位。负责日常运维、版本迭代与接口开发。
离线建库项目是一个基于百度paddle-cloud平台的一个定时抓取数据并对其建立索引发布的一个流式项目。
个人负责：
主要负责日常日志查看与分析。异常任务的处理与优化，需求开发，代码优化，版本迭代。
技术要点：
整体项目基于python+Hadoop+shell+paddle_cloud
基于paddle_cloud实现流式项目易于管理。
采用Hadoop集群，实现不同地区集群之间数据的快速传输
使用shell脚本来实现项目自动化
采用python来实现业务需求的处理
案例图片
相似案例推荐
-
资源数据恢复和导入SQL程序
将erp资源系统中的历史数据恢复到生产系统，并检查恢复后的数
-
测试进度统计VBA程序
根据各个分公司上报的大量的测试结果excel，将统计结果使用
-
知识产权管理平台
知识产权管理平台是以知识产权的创造、管理、保护和运用为主线，
-
网罗天下
主要负责：附近企业、猜你喜欢、商机流转、登录等模块的开发 解
-
爬虫数据采集
有丰富的爬虫经验，曾经通过脚本的方式注册上千个linkedi
-
统一数据共享中心
主要负责前端开发,根据ui设计图进行页面的开发,根据实际业务
1小时精推人才
需求方专属客服，免费梳理匹配
