Kaneki

爬虫工程师
韵舞科技 · 3年经验
Kaneki
日薪: ¥500/8h
地点: 其他 全区
时间: 可工作日驻场(自由职业原因)
ID:396125 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | 分布式 Redis Python Ajax MongoDB
我是一名专注于网络爬虫与数据挖掘的开发者,具备2年+爬虫系统开发经验。熟练掌握Python生态技术栈(Requests/Scrapy/Playwright),能高效处理反爬机制(IP代理池、验证码识别、Ajax动态渲染),日均抓取数据量级达百万条。

擅长分布式爬虫架构设计,曾主导开发基于Redis的分布式爬虫系统,实现多节点任务调度与去重,提升300%采集效率。熟悉数据清洗(XPath)与存储方案(MongoDB),完成过电商价格监控、舆情分析等实战项目,具备从数据采集到可视化全流程能力。

持续关注反爬技术演进,对法律合规与数据伦理有深刻认知。期待在数据驱动领域与团队共同突破技术边界。

从静态网站(如豆瓣电影TOP250)
技术点:HTML解析、CSV存储
到需要登录的站点(如微博热搜)
技术点:Session保持、简单加密参数
以及App逆向或WebSocket协议(如股票实时行情)
技术点:Protobuf解码
Kaneki ID:396125 复制

Kaneki

爬虫工程师 · 3年经验 · 韵舞科技
城市其他 全区 日薪500元/8h 时间 可工作日驻场(自由职业原因)
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | 分布式 Redis Python Ajax MongoDB
我是一名专注于网络爬虫与数据挖掘的开发者,具备2年+爬虫系统开发经验。熟练掌握Python生态技术栈(Requests/Scrapy/Playwright),能高效处理反爬机制(IP代理池、验证码识别、Ajax动态渲染),日均抓取数据量级达百万条。

擅长分布式爬虫架构设计,曾主导开发基于Redis的分布式爬虫系统,实现多节点任务调度与去重,提升300%采集效率。熟悉数据清洗(XPath)与存储方案(MongoDB),完成过电商价格监控、舆情分析等实战项目,具备从数据采集到可视化全流程能力。

持续关注反爬技术演进,对法律合规与数据伦理有深刻认知。期待在数据驱动领域与团队共同突破技术边界。

项目经验

从静态网站(如豆瓣电影TOP250)
技术点:HTML解析、CSV存储
到需要登录的站点(如微博热搜)
技术点:Session保持、简单加密参数
以及App逆向或WebSocket协议(如股票实时行情)
技术点:Protobuf解码
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏