中大网校题库爬取
项目职责:
●数据的获取
●数据的解析
●数据的保存
内容:
1.通过scrapy,对网页进行页面的获取
2. 通过xpath对页面进行解析。
3. 通过scrapy管道对数据进行保存
豆瓣电影近期最热电影top100榜单爬取
内容:
通过requests对豆瓣电影进行请求 ,通过re,xpath 对html内容进行解析。获取top100榜单。
rpa项目:
拉勾网数据抓取:通过rpa软件设计流程抓取数据。
银行的财务对账:通过rpa流程抓取数据,然后与excel表格进行对比,从而确认到账。
1688电商数据的抓取和填入等等。