$ÿĀ奋斗的菜鸟$ÿĀ

全栈开发工程师
上海中科软科技有限公司 · 2年经验
$ÿĀ奋斗的菜鸟$ÿĀ
日薪: ¥700/8h
地点: 上海
时间: 下班后周六周日可工作日远程
ID:429871 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Python 高并发 Selenium JavaScript 测试
主语言Python(5年经验),核心栈:[Django / Flask / FastAPI] + [SQLAlchemy / Peewee] + [Celery / Dramatiq]。
擅长:高并发下Python性能调优(cProfile + 多进程/协程)、复杂数据库查询优化(explain + 索引)、API接口安全防护(JWT + 参数加密)。
擅长逆向爬虫,精通Scrapy框架及Selenium/Playwright自动化。熟悉JavaScript混淆破解及IP代理池动态维护,数据清洗阶段熟练使用Pandas + NumPy。
拥有丰富的Python项目交付经验,代码风格严格遵循PEP8规范,每次交付均提供完整的技术文档(接口文档/部署文档)及单元测试,确保需求方后续可低成本维护。

项目一:亚马逊网站数据采集
为某跨境电商代运营公司重构亚马逊竞品价格监控系统,用于实时追踪Top 100竞品的售价、排名及库存变动,支撑其每日动态调价策略。

核心挑战是目标站采用阿里系WAF,对高频请求IP做永久封禁,且商品价格接口带有动态VMP加密签名,每30秒失效一次。我通过三大手段破局:

指纹伪造:利用Playwright模拟真实浏览器指纹(Canvas/WebGL),配合隧道动态代理池,将IP被封禁率从30%降至0.5%;

JS逆向:通过AST(抽象语法树)还原混淆JS,抽离出签名算法并用Python复现,单请求耗时从2秒(浏览器模式)降至200ms(直接请求模式);

分布式调度:搭建Scrapy-Redis集群,8个节点并发采集,引入布隆过滤器做URL去重,避免重复采集浪费配额。

项目名称:基于官方API的淘宝/拼多多实时销售看板与日报系统开发

我的攻坚与技术方案:

API数据中台搭建(requests + retry机制):基于淘宝开放平台(TOP)和拼多多开放平台API,使用Python编写稳定的数据拉取中间层。设计指数退避重试机制与异常日志记录,处理接口限流和网络抖动,确保每日数万笔订单数据完整拉取,不丢单、不漏单。

数据清洗与融合(Pandas + 时间序列):将API返回的JSON数据解析并存入 MySQL。利用 SQLAlchemy 做批量插入。针对“仅退款”、“退货退款”、“待发货”等不同订单状态进行标签化处理,精确计算核销收入。增加同比/环比计算,自动剔除刷单/测试订单。

可视化报表交付(PyEcharts / Plotly):直接生成交互式HTML报表,老板用浏览器打开即可看到动态图表,包含平台销售占比、近7日销售趋势、热力图(周内几号卖得最好)、以及实时销售大屏截图直接推送至钉钉/微信群。

交付成果:数据统计零延迟,财务月初对账时间从1.5天缩减至10分钟。报表系统稳定运行至今已处理超过50万笔订单,完整经历2025年双11大促峰值考验,零故障。
$ÿĀ奋斗的菜鸟$ÿĀ ID:429871 复制

$ÿĀ奋斗的菜鸟$ÿĀ

全栈开发工程师 · 2年经验 · 上海中科软科技有限公司
城市上海 日薪700元/8h 时间 下班后周六周日可工作日远程
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Python 高并发 Selenium JavaScript 测试
主语言Python(5年经验),核心栈:[Django / Flask / FastAPI] + [SQLAlchemy / Peewee] + [Celery / Dramatiq]。
擅长:高并发下Python性能调优(cProfile + 多进程/协程)、复杂数据库查询优化(explain + 索引)、API接口安全防护(JWT + 参数加密)。
擅长逆向爬虫,精通Scrapy框架及Selenium/Playwright自动化。熟悉JavaScript混淆破解及IP代理池动态维护,数据清洗阶段熟练使用Pandas + NumPy。
拥有丰富的Python项目交付经验,代码风格严格遵循PEP8规范,每次交付均提供完整的技术文档(接口文档/部署文档)及单元测试,确保需求方后续可低成本维护。

项目经验

项目一:亚马逊网站数据采集
为某跨境电商代运营公司重构亚马逊竞品价格监控系统,用于实时追踪Top 100竞品的售价、排名及库存变动,支撑其每日动态调价策略。

核心挑战是目标站采用阿里系WAF,对高频请求IP做永久封禁,且商品价格接口带有动态VMP加密签名,每30秒失效一次。我通过三大手段破局:

指纹伪造:利用Playwright模拟真实浏览器指纹(Canvas/WebGL),配合隧道动态代理池,将IP被封禁率从30%降至0.5%;

JS逆向:通过AST(抽象语法树)还原混淆JS,抽离出签名算法并用Python复现,单请求耗时从2秒(浏览器模式)降至200ms(直接请求模式);

分布式调度:搭建Scrapy-Redis集群,8个节点并发采集,引入布隆过滤器做URL去重,避免重复采集浪费配额。

项目名称:基于官方API的淘宝/拼多多实时销售看板与日报系统开发

我的攻坚与技术方案:

API数据中台搭建(requests + retry机制):基于淘宝开放平台(TOP)和拼多多开放平台API,使用Python编写稳定的数据拉取中间层。设计指数退避重试机制与异常日志记录,处理接口限流和网络抖动,确保每日数万笔订单数据完整拉取,不丢单、不漏单。

数据清洗与融合(Pandas + 时间序列):将API返回的JSON数据解析并存入 MySQL。利用 SQLAlchemy 做批量插入。针对“仅退款”、“退货退款”、“待发货”等不同订单状态进行标签化处理,精确计算核销收入。增加同比/环比计算,自动剔除刷单/测试订单。

可视化报表交付(PyEcharts / Plotly):直接生成交互式HTML报表,老板用浏览器打开即可看到动态图表,包含平台销售占比、近7日销售趋势、热力图(周内几号卖得最好)、以及实时销售大屏截图直接推送至钉钉/微信群。

交付成果:数据统计零延迟,财务月初对账时间从1.5天缩减至10分钟。报表系统稳定运行至今已处理超过50万笔订单,完整经历2025年双11大促峰值考验,零故障。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏