案例介绍
离线建库项目
项目描述：
外派百度担任后端开发工程师一职位。负责日常运维、版本迭代与接口开发。
离线建库项目是一个基于百度paddle-cloud平台的一个定时抓取数据并对其建立索引发布的一个流式项目。
个人负责：
主要负责日常日志查看与分析。异常任务的处理与优化，需求开发，代码优化，版本迭代。
技术要点：
整体项目基于python+Hadoop+shell+paddle_cloud
基于paddle_cloud实现流式项目易于管理。
采用Hadoop集群，实现不同地区集群之间数据的快速传输
使用shell脚本来实现项目自动化
采用python来实现业务需求的处理
案例图片
相似案例推荐
其他人才的相似案例推荐
-
资源数据恢复和导入SQL程序
将erp资源系统中的历史数据恢复到生产系统，并检查恢复后的数
-
测试进度统计VBA程序
根据各个分公司上报的大量的测试结果excel，将统计结果使用
-
知识产权管理平台
知识产权管理平台是以知识产权的创造、管理、保护和运用为主线，
-
网罗天下
主要负责：附近企业、猜你喜欢、商机流转、登录等模块的开发 解
-
爬虫数据采集
有丰富的爬虫经验，曾经通过脚本的方式注册上千个linkedi
-
统一数据共享中心
主要负责前端开发,根据ui设计图进行页面的开发,根据实际业务
-
配置管理系统
主要负责json协议制定，fastcgi编程，数据采集、处理
-
开评标系统
招标代理平台包含:开评标系统，专家库系统,招标代理管理系统.
-
大屏展示
通过FineReport实现物流方面的可视化展现大屏 展示
-
报表
利用FineReport通过可视化的形式展现数据订单状态
-
云广告（基于Android系统）
项目描述：基于独立定制研发的硬件设备，搭载Android8.
-
提取网页数据的Java程序
连接网站访问指定网页的Java程序，根据需要解析网页中有用的
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
