技术:熟悉 Python 后端开发、数据处理和自动化脚本开发,能够使用 Flask/FastAPI 搭建轻量级后台接口和管理系统,使用 MySQL 进行表结构设计、数据查询、权限控制和基础性能优化。熟悉 pandas、openpyxl 等工具,可完成 Excel/CSV 数据清洗、去重
项目:1. 企业数据管理后台:基于 Python + MySQL 搭建内网数据查询与管理系统,支持账号登录、角色权限、条件筛选、数据脱敏展示、操作日志和批量导入导出。项目重点是保证数据访问安全、查询流程清晰,并提供部署和使用说明。 2. Excel/CSV 自动化处理工具:为业务
案例: 内网数据平台
技术:熟练掌握 Python 语言,Linux 基本操作; 熟悉Requests, Scrapy 框架,Scrapy-Redis 分布式爬虫; 熟悉HTML,CSS,及多线程,多进程,HTTP/HTTPS协议; 熟练利用Xpath、CSS选择器,正则进行数据提取; 熟悉网
项目:项目名称:京东商品爬虫 项目描述:抓取指定商品的名称,价格,促销,评论等基本信息 项目过程: 1)根据需求确定数据模型,构造请求地址; 2)解析列表页,提取商品ID, 利用fiddler手机抓包抓取json数据; 3)构造商品详情页请求,实现翻页功能,jsonpa
案例: 京东商品爬虫