主要爬取广东省公共资源的招投标公告,写一个爬虫程序每天进行自动抓取存入数据库中。这个网站比较特殊,每次进入都会有验证码,我采用的方式是seleium对接打码平台处理验证码问题,获取cookie 然后再利用request进行信息抓取
主要对于喀斯玛商城药品信息的抓取,要求是4个分类(科研仪器、药品信息等),需要抓取的是标题、供应商名称、所在地、供应商联系方式。每个要求抓取100页信息,总共抓取了10000多条关于药品和科研仪器的信息。主要写爬虫程序进行抓取,这个网站需要进行登录抓取,反爬要求不高 主要分类要
扫码添加客服极速匹配,或直接发布需求让更多人才主动报名
基于 35,336 需求方信任
鼠标悬停或点击上方资质图片,可放大右下角二维码进行扫码验真。
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如该工程师当前档期不合,也可免费为您推荐相似候选人
收藏后可在“我的收藏”里统一查看,也方便后续继续联系和筛选合适人才。
登录后将自动返回当前页,继续浏览不会丢失。