技术:熟练掌握Java语言及面向对象编程思想,有良好编码习惯 熟悉防火墙操作掌握基本的linux系统操作命令,有使用xshell连接远程Linux服务器搭建项目,查看日志和 分析性能的相关经验 熟悉网络爬虫的操作,有实际开发中爬虫网站资源的项目经历,熟悉SEO优化和绕过反爬虫
项目:云南大理智慧城管平台项目描述:大理智慧城管平台是一项集数据采集、信息发布、事件处置和指令中心于一体的城市管理服务平台。通过整合城市各部门的信息资源,对城市基础设施、环境卫生、交通出行、安全监控等方面进行实时监测和预警,提高了城市综合化治理能力和水平。该平台主要包括以下模块:数据采
案例: 城市综合管理服务平台综合执法平台
技术:1、搭建公司自动化测试平台(Spring Boot + Mybatis Plus + Vue Element),推动整个平台的需求实现到 测试运营工作,结合运维 DevOps 平台实现 CICD 中所需的自动化测试,实现冒烟测试、回归测试、巡检测试都 以平台自动化方式实现。技术创
项目:自动化测试平台(Spring Boot + Mybatis Plus + Vue Element),推动整个平台的需求实现到 测试运营工作,结合运维 DevOps 平台实现 CICD 中所需的自动化测试,实现冒烟测试、回归测试、巡检测试都 以平台自动化方式实现。技术创新并结合平台
案例: 商品信息爬虫devops测试平台
技术:数据分析 精通 python与sql ,熟练掌握 pandas、numpy、request、pyqt5、matplotlib、flask等第三方库,处理各种excel、csv、txt等文件,包括数据标准化,分组聚合计算、筛选、汇总,可开发处理数据的工具与自动化脚本程序。 爬虫
项目:项目需求:爬取多个公开网站的图片、视频、文本信息、招标信息等数据。 涉及技术: 1.观察网页结构,寻找网站接口,解析接口数据结构,获取指定数据。 2.通过 js 逆向解决参数加密与网站数据加密等问题。 3.通过使用动态代理 IP 和随机 User-Agent 等方法
案例: 爬虫设计自动化办公小程序