1.开发了一个电商商品数据抓取系统,能够从多个电商网站(如亚马逊、淘宝)抓取商品信息,并实现价格监控和数据分析功能。
使用 Scrapy 和 Selenium 抓取电商网站的商品信息(如名称、价格、库存),将抓取的数据存储到 MySQL 数据库中,支持快速查询和更新,实现价格监控功能,当商品价格发生变化时自动发送邮件通知,提供数据可视化功能,生成商品价格趋势图和销售数据分析报告。
2.开发了一个自动化工具,用于处理企业内部的大量文件(如 Excel、CSV、PDF),实现数据提取、格式转换和批量导出功能。从 Excel 和 CSV 文件中提取指定数据,并进行清洗和格式化,支持将 PDF 文件中的表格数据提取并转换为 Excel 格式,实现批量文件处理功能,支持自动化任务调度(如每天定时处理新文件,将处理后的数据导出为指定格式(如 Excel、CSV),并支持自定义字段和模板。
3.开发了一个在线教育平台的课程管理系统,支持课程发布、学生管理和数据分析功能,开发课程管理模块,支持教师发布课程、上传资料和管理学生,实现学生管理模块,支持学生选课、查看课程进度和提交作业,提供数据分析功能,生成学生学习进度报告和课程效果分析,部署到 AWS 云服务器,使用 Docker 和 Nginx 实现高可用性和负载均衡。