项目描述要点: - 功能:爬取浙江省政府网站中关于“新能源汽车”的公开信息,包括标题、发布时间、正文内容等,并保存为文本文件。 - 技术:使用Selenium模拟浏览器操作,处理多窗口切换,采用多种XPath策略适配不同页面结构,文件名清理等。 - 我的角色:独立开发整个爬虫程序,包括页面解析、反爬处理、数据存储等。
1. 功能:实时爬取全国拥堵枢纽榜单(火车站),包括排名、名称、拥堵延时指数和车速。 2. 技术亮点:使用requests库高效获取数据,pandas处理数据排序,openpyxl实现Excel自动更新和图表生成。 3. 定时任务:每5分钟自动更新一次,并处理异常情况。 4. 个人角色:独立开发整个脚本,包括数据获取、处理、存储和可视化。
项目描述要点: - 功能:爬取浙江省政府网站中关于“新能源汽车”的公开信息,包括标题、发布时间、正文内容等,并保存为文本文件。 - 技术:使用Selenium模拟浏览器操作,处理多窗口切换,采用多种XPath策略适配不同页面结构,文件名清理等。 - 我的角色:独立开发整个爬虫程序,包括页面解析、反爬处理、数据存储等。...
1. 功能:实时爬取全国拥堵枢纽榜单(火车站),包括排名、名称、拥堵延时指数和车速。 2. 技术亮点:使用requests库高效获取数据,pandas处理数据排序,openpyxl实现Excel自动更新和图表生成。 3. 定时任务:每5分钟自动更新一次,并处理异常情况。 4. 个人角色:独立开发整个脚本,包括数据获取、处理、存储和可视化。...
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如该工程师当前档期不合,也可免费为您推荐相似候选人