摩天

后端工程师
无 · 3年经验
摩天
日薪: ¥500/8h
地点: 上海 闸北
时间: 周六周日
ID:394010 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Python
精通 Python,熟悉面向对象编程思想,能够独立完成复杂的项目开发。熟悉playwright的使用与应用,使用 Python 的 Scrapy 框架搭建爬虫系统,结合多线程技术,大幅提高数据采集效率。针对不同网站的结构特点,开发定制化的解析规则,实现对新闻标题、正文、发布时间等关键信息的精准提取。

大型电商数据抓取:负责构建数据采集系统,使用 Scrapy 框架、Request 库与 Playwright,对多个电商平台进行数据抓取。通过优化数据抓取策略,解决了反爬虫机制限制,将数据采集效率提升 40%。实现对商品详情、价格、评论等关键数据的精准采集,日均采集数据量超 10 万条。​
社交媒体舆情监测:基于多线程技术开发爬虫程序,对社交媒体平台进行信息采集,实时监测舆情动态。使用代理池和随机 User - Agent 技术,绕过平台封禁机制,保障采集任务的稳定性。收集的数据为公司品牌公关决策提供有力支持。
摩天 ID:394010 复制

摩天

后端工程师 · 3年经验 · 无
城市上海 闸北 日薪500元/8h 时间 周六周日
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Python
精通 Python,熟悉面向对象编程思想,能够独立完成复杂的项目开发。熟悉playwright的使用与应用,使用 Python 的 Scrapy 框架搭建爬虫系统,结合多线程技术,大幅提高数据采集效率。针对不同网站的结构特点,开发定制化的解析规则,实现对新闻标题、正文、发布时间等关键信息的精准提取。

项目经验

大型电商数据抓取:负责构建数据采集系统,使用 Scrapy 框架、Request 库与 Playwright,对多个电商平台进行数据抓取。通过优化数据抓取策略,解决了反爬虫机制限制,将数据采集效率提升 40%。实现对商品详情、价格、评论等关键数据的精准采集,日均采集数据量超 10 万条。​
社交媒体舆情监测:基于多线程技术开发爬虫程序,对社交媒体平台进行信息采集,实时监测舆情动态。使用代理池和随机 User - Agent 技术,绕过平台封禁机制,保障采集任务的稳定性。收集的数据为公司品牌公关决策提供有力支持。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏