分布式爬虫系统的搭建

人工智能 其他 案例ID:164049
王浩
3 年经验· 腾讯
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

公司智能聊天机器人需要实时的语料更新,分布式爬虫系统爬取百度贴吧、豆瓣、水木社区等数据源,将获得的数据进行清洗入库
我负责整个爬虫系统的搭建、数据的稳定爬取、数据清洗入库。整个项目是我独立负责。

分布式爬虫系统的搭建

人工智能 · 其他 案例ID:164049
联系该工程师
微信扫码,建群沟通
作者: 王浩 - 3年经验- 腾讯

案例介绍

公司智能聊天机器人需要实时的语料更新,分布式爬虫系统爬取百度贴吧、豆瓣、水木社区等数据源,将获得的数据进行清洗入库
我负责整个爬虫系统的搭建、数据的稳定爬取、数据清洗入库。整个项目是我独立负责。

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×