设计分布式爬虫架构,基于 Scrapy 框架实现多线程视频资源采集 • 开发反爬策略模块,包括 IP 代理池管理、请求头伪装、验证码识别等功能 • 实现视频元数据提取与分析,使用 OpenCV 进行视频内容识别与分类 • 构建分布式存储系统,使用 MongoDB 存储结构化元数据,MinIO 存储视频文件 • 设计定时监控机制,自动检测网站结构变化并更新爬虫规则...
项目职责: • 设计并实现基于 Flask 的快递账单自动化生成平台,通过 API 对接快递公司系统获取运单数据 • 使用 Pandas 构建数据处理引擎,实现运费计算、折扣规则应用、异常订单识别等核心功能 • 开发自定义报表生成模块,支持多维度数据筛选与可视化展示,生成 PDF 格式专业账单 • 集成邮件发送功能,实现账单自动分发至客户邮箱,支持定时任务调度 项目成果: • 替代人工操作,账单生成效率提升 85%,错误率降低至 0.1% 以下 • 系统稳定运行 12 个月以上,处理超 10 万单 / 月的账单生成任务 • 客户付款周期缩短 3 天,现金流状况显著改善...
责任描述: 1. 数据结构设计 2. 逻辑图绘制 3. 功能代码实现 4. 各类硬件对接 4. 团队管理与协作 5. 各类文档提供 项目描述: 该项目为面向制药公司制药车间定制的门禁系统,整体包含java服务器与安卓、Linux下位机两部分,我主要负责架构设计工作。 项目采用BS架构设计,主体语言为Java、js、c++。 后端采用SpringBoot+Mybatis+MySql+Redis技术栈构建,文档处理由poi进行pdf输出,并对接了AD域控进行统一认证管理; 管理端前端为Vue3.0,分为chrome浏览器与Electron两部分; 终端部分为安卓门禁机、Linu...
2023.08 - 2024.01 傅里叶变换红外光谱仪软件系统 责任描述: 进行项目的开发环境及技术框架的搭建; 对技术文档编写; 对组人员工作调配; 配合业务人员进行需求及可行性分析; 进行软件调优; 项目描述: 该项目为面向仪器仪表检测的功能系统,整体包含PC上位机与嵌入式下位机两部分,我主要负责上位机开发,整体技术采用QT/C++架构设计,采用USB通讯连接,进行双工交互。 主要包含以下功能: 1. 上下位机握手,下位机初始化 2. 对物体进行红外光谱检测,收集实验参数,原始数据采集采用傅里叶变换进行过滤。 3. 进行红外光谱分析,包含高斯滤波、均值滤波、中值滤波...