技术:就基本的爬虫操作,比如使用requests模拟访问网站,xpath,bs4,正则表达式,进行数据提取和数据清洗 cookies登入,批量数据,图片下载,核心以外的一些细节上的处理不是很好。还有一些基本的保存方式,TXT,json,xlsx,mysql不是很熟练。
项目:现在暂时还没有,自己的话有爬过京东,淘宝,图片网站,股票网站等的数据,希望有机会可以继续增加下自己的实战经验。就基本的爬虫操作,比如使用requests模拟访问网站,xpath,bs4,正则表达式,进行数据提取和数据清洗 cookies登入,批量数据,图片下载,核心以外的一些细
案例: 淘宝
技术:目前已经有5年 PHP 开发经验,在于我曾经帮助团队解决一些性能问题,比如 CPU 飙高的问题,慢 SQL 等问题,了解高并发、高可用系统和大型网站架构等并非问题,适用代码多层架构编写。 熟悉各种第三方接口的使用,如:第三方登录、短信验证、高德地图 API 接口对接等
项目:电商管理后台+小程序 窝趣公寓(小程序) 窝趣分销(app) 智慧门店管理系统 1 参与项目需求分析,数据字典,API 文档编写; 2 参与 Git 管理等项目初始化 3 参与项目数据库的优化及维护; 4 负责商品管理的开发及优化(商品列表、商品分类、品牌列表等
案例: 上膳源