熟练掌握Python后端开发,主要使用Django框架构建RESTful API服务,能独立完成数据库设计、接口开发与系统部署。
后端开发:精通Django ORM、视图集(ViewSet)、中间件及信号机制。
数据采集:熟悉爬虫技术,能使用Requests、BeautifulSoup等库抓取静态页面,并初步掌握Selenium处理动态加载数据,了解Scrapy框架及反爬策略。
数据库与工具:熟练使用MySQL等关系型数据库,能进行性能调优;熟悉Redis缓存应用;掌握Git版本控制及Linux基础部署命令。
熟练掌握Python后端开发,主要使用Django框架构建Web应用。在开发任务统计网站的项目中,我独立完成了从数据库模型设计(使用Django ORM)、利用Django-admin实现后台数据管理。
在数据采集与分析方面,我具备丰富的爬虫开发经验。曾使用Scrapy框架编写分布式爬虫,通过设置Downloader Middleware和User-Agent轮换策略,高效抓取公开的大型游戏官网及商业网站数据。针对动态加载的内容,我能运用Selenium模拟浏览器操作,获取完整的页面数据。采集到的数据经Pandas清洗后,通过Django的API接口或管理命令导入数据库。