闲鱼 数据收集

合作方式 项目制
预估日薪 500
预估总价 5000元
预估工时 10天
发布位置 广州
可参与范围 全国远程
职位ID 158709
发布方 CWS
CWS
投递职位 已有49人投递 ,发布人 点此登录 后查看。

需求描述

我需要开发一个爬虫程序,用于从闲鱼 (Goofish) 应用程序中抓取最新的商品信息。这个爬虫程序应该能够根据指定的分类筛选商品并定期获取更新。具体需求如下:
获取商品的名称、价格、描述、图片链接和其他相关信息。

抓取商品信息

获取商品的名称、价格、描述、图片链接和其他相关信息。

支持抓取不同类别的商品,例如:电子产品、服装、家具等。

按分类筛选

能够根据用户指定的商品类别(例如,电子产品、手机、电脑配件等)进行过滤。

支持多个分类同时筛选。

获取最新的商品

爬虫程序应定期(例如,每小时或每天)获取新的商品信息,确保能够抓取到最新的商品。

支持按发布时间排序,优先获取最新发布的商品。

支持分页

能够处理分页,抓取多个页面上的商品数据。

获取详细信息

获取每个商品的详细信息,包括:商品名称、价格、描述、卖家位置、联系方式(如有)等。

错误处理与重试机制

如果抓取过程中出现错误(例如,连接失败),应自动重试。

程序应能够处理网络问题和其他意外情况。

数据存储

MY WX- clubwearsolution

发布方信用行为

发布项目 2
订单总数 0
退款单数 0

完善简历

工程师完善技术能力和项目经验,更易接到订单

完善人才简历

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。