洛风

数据开发工程师
斯凯奇 · 10年经验
洛风
日薪: ¥500/8h
地点: 广州
时间: 下班后周六周日
ID:432754 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Python Selenium Spring Boot Spring Node.js RESTful Docker Nginx MySQL Redis PostgreSQL Vue JavaScript Linux
具备数据全流程开发能力的全栈工程师,能独立完成从需求分析、系统设计到部署上线的完整交付。
数据采集:熟练使用python Requests、BeautifulSoup处理请求,熟悉Selenium、Scrapy、DrissionPage等自动化采集框架和架构,掌握常见加密算法和JS逆向技术。
前端开发:熟悉Vue、JavaScript,具备构建现代化单页应用的能力。
后端开发:熟练使用Node.js、Python进行服务端开发,掌握FastAPI、Spring Boot等框架,具备RESTful API设计、数据库设计与优化能力。
数据库与运维:熟悉MySQL、PostgreSQL、Redis等数据库,掌握Docker容器化部署、Nginx配置及Linux服务器运维。
报表开发与可视化:熟练使用Tableau、FineReport等工具搭建BI看板与报表;能编写自动化脚本实现日报、周报、月报的定时生成与邮件推送。

长期深耕数据采集与自动化方向,具备从逆向破解、数据采集清洗到可视化报表与流程自动化的完整落地能力,技术栈覆盖逆向工程、数据采集、Java+Vue全栈开发及RPA流程自动化。
项目一:多电商平台后台数据采集——针对淘宝、京东、拼多多、抖音等主流电商平台,逆向破解各平台店铺、商品等接口的加密签名体系(如Token生成、请求体加密等),通过Chrome DevTools + Fiddler + Frida动态Hook定位加密入口,还原各种签名逻辑,搭建自动化采集框架,结合代理IP池与请求头轮转策略,日均稳定采集20万+条商品数据;实现多平台数据格式统一清洗与去重,落地MySQL数据表存储,累计数据量超千万级。
项目二:企业数据报表系统(Vue+Java前后端)——前端使用Vue + Element UI构建数据看板与报表管理页面,后端使用Spring Boot + MyBatis实现数据接口与权限控制。集成ECharts实现多维度可视化图表,开发定时任务模块完成每日报表数据自动计算与推送;通过SQL索引优化与数据预聚合,将百万级数据查询响应时间从8秒降至500ms以内。系统已支撑业务部门10+个核心报表线上运行。
项目三:微信公众号内容采集与监控系统——针对微信公众平台的反爬机制,通过抓包分析完整还原登录及请求流程,破解关键请求参数生成逻辑;采用requests + httpx模拟微信内置浏览器环境,实现多账号Cookie池管理与轮转,突破单账号请求频率限制。系统日均采集100+篇公众号文章,经LLM清洗后自动生成舆情日报并推送至企业微信群。
项目四:企业RPA流程自动化系统——基于Python + 影刀RPA构建RPA自动化系统,模拟人工操作完成多系统间的数据填报、审批流转、报表下载等重复性业务流程。针对企业内网系统及部分SaaS平台,通过DOM元素定位与页面状态机控制实现自动化作业;开发任务调度中心,支持定时触发、异常重试、执行日志追踪与结果推送。已完成财务对账、流程审批、销售数据汇总、供应链单据录入等多条核心流程自动化。
洛风 ID:432754 复制

洛风

数据开发工程师 · 10年经验 · 斯凯奇
城市广州 日薪500元/8h 时间 下班后周六周日
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Python Selenium Spring Boot Spring Node.js RESTful Docker Nginx MySQL Redis PostgreSQL Vue JavaScript Linux
具备数据全流程开发能力的全栈工程师,能独立完成从需求分析、系统设计到部署上线的完整交付。
数据采集:熟练使用python Requests、BeautifulSoup处理请求,熟悉Selenium、Scrapy、DrissionPage等自动化采集框架和架构,掌握常见加密算法和JS逆向技术。
前端开发:熟悉Vue、JavaScript,具备构建现代化单页应用的能力。
后端开发:熟练使用Node.js、Python进行服务端开发,掌握FastAPI、Spring Boot等框架,具备RESTful API设计、数据库设计与优化能力。
数据库与运维:熟悉MySQL、PostgreSQL、Redis等数据库,掌握Docker容器化部署、Nginx配置及Linux服务器运维。
报表开发与可视化:熟练使用Tableau、FineReport等工具搭建BI看板与报表;能编写自动化脚本实现日报、周报、月报的定时生成与邮件推送。

项目经验

长期深耕数据采集与自动化方向,具备从逆向破解、数据采集清洗到可视化报表与流程自动化的完整落地能力,技术栈覆盖逆向工程、数据采集、Java+Vue全栈开发及RPA流程自动化。
项目一:多电商平台后台数据采集——针对淘宝、京东、拼多多、抖音等主流电商平台,逆向破解各平台店铺、商品等接口的加密签名体系(如Token生成、请求体加密等),通过Chrome DevTools + Fiddler + Frida动态Hook定位加密入口,还原各种签名逻辑,搭建自动化采集框架,结合代理IP池与请求头轮转策略,日均稳定采集20万+条商品数据;实现多平台数据格式统一清洗与去重,落地MySQL数据表存储,累计数据量超千万级。
项目二:企业数据报表系统(Vue+Java前后端)——前端使用Vue + Element UI构建数据看板与报表管理页面,后端使用Spring Boot + MyBatis实现数据接口与权限控制。集成ECharts实现多维度可视化图表,开发定时任务模块完成每日报表数据自动计算与推送;通过SQL索引优化与数据预聚合,将百万级数据查询响应时间从8秒降至500ms以内。系统已支撑业务部门10+个核心报表线上运行。
项目三:微信公众号内容采集与监控系统——针对微信公众平台的反爬机制,通过抓包分析完整还原登录及请求流程,破解关键请求参数生成逻辑;采用requests + httpx模拟微信内置浏览器环境,实现多账号Cookie池管理与轮转,突破单账号请求频率限制。系统日均采集100+篇公众号文章,经LLM清洗后自动生成舆情日报并推送至企业微信群。
项目四:企业RPA流程自动化系统——基于Python + 影刀RPA构建RPA自动化系统,模拟人工操作完成多系统间的数据填报、审批流转、报表下载等重复性业务流程。针对企业内网系统及部分SaaS平台,通过DOM元素定位与页面状态机控制实现自动化作业;开发任务调度中心,支持定时触发、异常重试、执行日志追踪与结果推送。已完成财务对账、流程审批、销售数据汇总、供应链单据录入等多条核心流程自动化。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏