熟练使用Requests、Scrapy、Selenium等框架,支持动态渲染(如Headless Chrome、Playwright);掌握反爬策略应对(IP代理池、验证码识别、User-Agent轮换、请求频率控制);精通数据存储(MySQL/MongoDB/Elasticsearch)及可视化分析
使用Scrapy+Splash/Selenium实现动态网页渲染,抓取电影名称、评分、导演、演员、票房、评论等结构化数据。支持分页爬取、模糊搜索及关键词过滤(如“高分”“热门”)。数据分析后存储至MongoDB(非结构化数据),支持快速查询与分析。