微博爬虫

人工智能-其他 UM

基于scrapy框架和mongo数据库,实现了微博数据爬取,具体来说包括了:1. 爬取关键词含有“公益”、“捐赠”、“慈善”的话题2. 爬取每个话题的汇总信息-总阅读量、原创人数3. 爬取每个话题下微博内容、点赞、评论数。并使用了动态ip技术反爬。...

微博爬虫
微博爬虫

IMDB电影数据爬取和分析

人工智能-其他 UM

基于scrapy框架和mongo数据库爬取了IMDB上一千多步电影的详细信息和演员、导演、编剧的详细信息。并对数据进行了简单可视化和分析。...

IMDB电影数据爬取和分析
IMDB电影数据爬取和分析
------ 加载完毕 ------
联系聘用方端客服