闲鱼 数据收集

项目总价 5000元
预估日薪 500/天
合作方式: 时间制
预估工时: 10天
发布位置: 广州
参与范围: 全国远程
CWS
CWS
职位ID: 158708复制

发布方信用行为

发布项目
0
订单总数
0
退款单数

需求描述

我需要开发一个爬虫程序,用于从闲鱼 (Goofish) 应用程序中抓取最新的商品信息。这个爬虫程序应该能够根据指定的分类筛选商品并定期获取更新。具体需求如下:
获取商品的名称、价格、描述、图片链接和其他相关信息。

抓取商品信息

获取商品的名称、价格、描述、图片链接和其他相关信息。

支持抓取不同类别的商品,例如:电子产品、服装、家具等。

按分类筛选

能够根据用户指定的商品类别(例如,电子产品、手机、电脑配件等)进行过滤。

支持多个分类同时筛选。

获取最新的商品

爬虫程序应定期(例如,每小时或每天)获取新的商品信息,确保能够抓取到最新的商品。

支持按发布时间排序,优先获取最新发布的商品。

支持分页

能够处理分页,抓取多个页面上的商品数据。

获取详细信息

获取每个商品的详细信息,包括:商品名称、价格、描述、卖家位置、联系方式(如有)等。

错误处理与重试机制

如果抓取过程中出现错误(例如,连接失败),应自动重试。

程序应能够处理网络问题和其他意外情况。

数据存储

闲鱼 数据收集

合作方式 时间制
预估日薪 500
预估总价 5000元
预估工时 10天
发布位置 广州
可参与范围 全国远程
职位ID 158708复制
发布方 CWS
CWS
已有40人投递 ,发布人 点此登录 后查看。

需求描述

我需要开发一个爬虫程序,用于从闲鱼 (Goofish) 应用程序中抓取最新的商品信息。这个爬虫程序应该能够根据指定的分类筛选商品并定期获取更新。具体需求如下:
获取商品的名称、价格、描述、图片链接和其他相关信息。

抓取商品信息

获取商品的名称、价格、描述、图片链接和其他相关信息。

支持抓取不同类别的商品,例如:电子产品、服装、家具等。

按分类筛选

能够根据用户指定的商品类别(例如,电子产品、手机、电脑配件等)进行过滤。

支持多个分类同时筛选。

获取最新的商品

爬虫程序应定期(例如,每小时或每天)获取新的商品信息,确保能够抓取到最新的商品。

支持按发布时间排序,优先获取最新发布的商品。

支持分页

能够处理分页,抓取多个页面上的商品数据。

获取详细信息

获取每个商品的详细信息,包括:商品名称、价格、描述、卖家位置、联系方式(如有)等。

错误处理与重试机制

如果抓取过程中出现错误(例如,连接失败),应自动重试。

程序应能够处理网络问题和其他意外情况。

数据存储

发布方信用行为

发布项目 2
订单总数 0
退款单数 0

完善简历

工程师完善技术能力和项目经验,更易接到订单

完善人才简历

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。
已有 40 人投递
登录后查看投递状态