项目经历 1:公开数据采集与监控系统
曾参与开发公开网站数据采集与监控工具,主要用于定时采集目标网站的商品、公告、招聘或业务公开信息,并对数据进行清洗、去重、结构化存储和导出。项目使用 Python 作为主要开发语言,结合 Requests、BeautifulSoup、Selenium/Playwright 等技术处理静态页面和动态页面数据,支持分页采集、异常重试、代理配置、定时任务和日志记录。采集结果可按客户需求导出为 Excel、CSV,或写入 MySQL 数据库,方便后续查询和分析。项目中重点处理了页面结构变化、数据重复、请求失败、任务中断恢复等问题,提高了采集任务的稳定性和可维护性。该项目体现了我在爬虫开发、数据清洗、自动化任务调度和基础部署维护方面的综合能力。
项目经历 2:CF-Web 小工具开发
曾开发 CF-Web 相关小工具,用于提升日常运维和站点管理效率。项目主要围绕 Web 配置、状态检测、接口调用和自动化处理展开,提供简洁的页面操作入口,减少重复手动操作。后端使用 Python/Node.js 处理业务逻辑和接口请求,前端提供基础的 Web 管理界面,支持参数配置、任务执行、结果展示和异常提示等功能。项目过程中对常用接口封装、配置管理、错误处理、日志输出和部署运行进行了优化,使工具能够在本地或服务器环境中稳定使用。该项目锻炼了我从实际需求出发设计小工具的能力,包括前后端联调、接口处理、自动化流程封装、服务部署和问题排查,适合解决轻量级运维、数据处理和效率提升类需求。