案例展示

• 

  对某招聘平台的招聘信息的爬取

  对某招聘网站平台的许多招聘公司的招聘信息的爬取。该网站有一定的反爬能力，如设置了ajax反爬系统。我通过不断请求获取到了正确的json接口并成功获取到了相应的数据信息。然后通过beautiful soup等库精确定位特定数据并进行处理最后成功保存了下来。

• 

  爬取某小说平台某部小说

  对某小说平台的某部小说内容进行爬取，运用了beautiful soup等库来精确定位数据并处理数据最后保存。

• 

  爬取某评分网站某排行榜的电影信息

  该程序能爬取某评分平台某排行榜的电影信息，包括电影序号，名称，信息，评分和热评。该程序运用beautiful soup库来精确定位数据信息并处理数据将信息保存下来。总共爬取了10页共250条电影的评分内容。

• 

  采用多线程爬取某站上千张图片

  本次项目采用多线程的方式编写爬虫，爬取某动漫网站上千张cos图片。本次采用多线程爬取相较于单线程极大的提高了工作效率，同时此次项目代码采用模块化设计，层次分明，不仅爬取了图片，同时还将图片相关标题一并保存下来，项目质量高。