小白

无
无 · 1年经验
小白
日薪: ¥500/8h
地点: 其他 全区
时间: 可工作日驻场(自由职业原因)
ID:317717 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Python MySQL Redis MongoDB Linux
掌握python语法基础;Linux基本使用;MySQL、MongoDB及Redis数据库基本使用;网络编程基础及阻塞解决方法;Web前端;
网络爬虫分析与代码实现 ;Django框架;了解数据分析等

东莞废弃物数据爬取_1

要求:
项目公告数据更新https://www.dgrecycle.com/Trade_Announcement/AnnouncementList.aspx?mid=1107131&fid=0时间范围:2022-8-10至今

思路:
使用selenium爬取,打开浏览器后在20s内手动选择查询条件并点击查询。
根据总页数获得需要点击"下一页"的次数,依次循环获得每一页的内容。
外内容与里内容表头手写。
获得外内容的每一行,并点击该行详情页同时获得该行对应的里内容。
当所有内容爬取完后,将外、里表头拼接为总表头,外、里内容拼接为总内容后,将总表头与总内容写入csv里并保存。
小白 ID:317717 复制

小白

无 · 1年经验 · 无
城市其他 全区 日薪500元/8h 时间 可工作日驻场(自由职业原因)
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Python MySQL Redis MongoDB Linux
掌握python语法基础;Linux基本使用;MySQL、MongoDB及Redis数据库基本使用;网络编程基础及阻塞解决方法;Web前端;
网络爬虫分析与代码实现 ;Django框架;了解数据分析等

项目经验

东莞废弃物数据爬取_1

要求:
项目公告数据更新https://www.dgrecycle.com/Trade_Announcement/AnnouncementList.aspx?mid=1107131&fid=0时间范围:2022-8-10至今

思路:
使用selenium爬取,打开浏览器后在20s内手动选择查询条件并点击查询。
根据总页数获得需要点击"下一页"的次数,依次循环获得每一页的内容。
外内容与里内容表头手写。
获得外内容的每一行,并点击该行详情页同时获得该行对应的里内容。
当所有内容爬取完后,将外、里表头拼接为总表头,外、里内容拼接为总内容后,将总表头与总内容写入csv里并保存。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏