ID:403382

sunset

安全研究员

  • 公司信息:
  • 南京赛宁
  • 工作经验:
  • 4年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 可工作日远程
  • 所在区域:
  • 其他
  • 全区

技术能力

通过Scrapy+redis实现简易分布式爬虫(学习阶段)
使用XPath/正则表达式解析复杂HTML结构(准确率95%+)
语言:Python(熟练requests/BeautifulSoup)、SQL(基础查询)
工具:Scrapy框架、Selenium动态渲染、Fiddler抓包分析
数据存储:MySQL/MongoDB(CRUD操作)、CSV/Excel
js逆向:hook 常见加密
验证码:滑块验证码,文字验证码

项目经验

电商价格监控爬虫
技术组合:Requests + BeautifulSoup + MySQL
成果:自动抓取某平台5000+商品每日价格,数据异常波动预警(节省手动统计时间80%)
难点解决:突破简单滑块验证码(通过请求延迟模拟)

2. 新闻聚合爬虫
技术组合:Scrapy + MongoDB
成果:日均采集2000篇新闻(标题/摘要/来源),支持关键词过滤

案例展示

  • 聚合爬虫

    聚合爬虫

    新闻聚合爬虫 技术组合:Scrapy + MongoDB 成果:日均采集2000篇新闻(标题/摘要/来源),支持关键词过滤

  • 电商价格监控

    电商价格监控

    电商价格监控爬虫 | 技术组合:Requests + BeautifulSoup + MySQL 成果:自动抓取某平台5000+商品每日价格,数据异常波动预警(节省手动统计时间80%)

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服