职位ID:158709

闲鱼 数据收集

  • 合作方式:
  • 项目制 全国远程
  • 预估日薪:
  • 500
  • 预估总价:
  • 5000元
  • 预估工时:
  • 10天
  • 所在区域:
  • 全国远程

需求描述

我需要开发一个爬虫程序,用于从闲鱼 (Goofish) 应用程序中抓取最新的商品信息。这个爬虫程序应该能够根据指定的分类筛选商品并定期获取更新。具体需求如下:
获取商品的名称、价格、描述、图片链接和其他相关信息。

抓取商品信息

获取商品的名称、价格、描述、图片链接和其他相关信息。

支持抓取不同类别的商品,例如:电子产品、服装、家具等。

按分类筛选

能够根据用户指定的商品类别(例如,电子产品、手机、电脑配件等)进行过滤。

支持多个分类同时筛选。

获取最新的商品

爬虫程序应定期(例如,每小时或每天)获取新的商品信息,确保能够抓取到最新的商品。

支持按发布时间排序,优先获取最新发布的商品。

支持分页

能够处理分页,抓取多个页面上的商品数据。

获取详细信息

获取每个商品的详细信息,包括:商品名称、价格、描述、卖家位置、联系方式(如有)等。

错误处理与重试机制

如果抓取过程中出现错误(例如,连接失败),应自动重试。

程序应能够处理网络问题和其他意外情况。

数据存储

MY WX- clubwearsolution

投递职位 已有41人投递,发布人 点此登录 后查看。

信用行为

  • 发布项目
    2
  • 订单总数
    0
  • 退款单数
    0

完善简历

工程师完善技术能力和项目经验,更易接到订单

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信客服

需求方请加需求方端客服沟通需求,工程师请加工程师端客服浏览推送职位

需求方端客服
工程师端客服
联系需求方端客服