古月

爬虫工程师
无 · 1年经验
古月
日薪: ¥500/8h
地点: 重庆
时间: 可工作日远程
ID:435252 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Python Node.js Webpack Selenium
Python爬虫:熟练使用 requests、httpx、aiohttp、Scrapy 进行数据采集;熟悉 XPath、BeautifulSoup、lxml、正则解析;掌握多线程、协程、代理IP池、Cookie池、UA池、限速重试等常见采集方案;了解 Selenium、Playwright 处理动态渲染页面。
JS逆向:熟悉 Chrome DevTools、Charles/Fiddler/mitmproxy 抓包分析;了解 Webpack 混淆、JS 扣代码、Node.js 补环境;能分析常见 sign、token、cookie 参数生成逻辑;了解 AES、RSA、MD5、HMAC、SHA 等常见加密方式;能使用 Python 复现简单加密参数。

个人独立完成了多场景 Python 爬虫实践,覆盖短视频、电商、金融三类数据场景。针对抖音平台,通过 Playwright 模拟浏览器结合接口请求的方式,完成视频元数据、账号基础信息的抓取,处理了接口签名校验与基础反爬限制;针对购物网站,实现商品价格、销量、规格等信息的批量采集,搭配异步请求提升采集效率,并完成数据去重与结构化清洗;针对投资类数据,对接公开财经接口,实现行情、财报等数据的定时增量抓取,统一存入数据库做持久化存储。过程中自主解决反爬对抗、数据格式统一等问题,积累了爬虫方案设计与数据处理的实战经验。
古月 ID:435252 复制

古月

爬虫工程师 · 1年经验 · 无
城市重庆 日薪500元/8h 时间 可工作日远程
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Python Node.js Webpack Selenium
Python爬虫:熟练使用 requests、httpx、aiohttp、Scrapy 进行数据采集;熟悉 XPath、BeautifulSoup、lxml、正则解析;掌握多线程、协程、代理IP池、Cookie池、UA池、限速重试等常见采集方案;了解 Selenium、Playwright 处理动态渲染页面。
JS逆向:熟悉 Chrome DevTools、Charles/Fiddler/mitmproxy 抓包分析;了解 Webpack 混淆、JS 扣代码、Node.js 补环境;能分析常见 sign、token、cookie 参数生成逻辑;了解 AES、RSA、MD5、HMAC、SHA 等常见加密方式;能使用 Python 复现简单加密参数。

项目经验

个人独立完成了多场景 Python 爬虫实践,覆盖短视频、电商、金融三类数据场景。针对抖音平台,通过 Playwright 模拟浏览器结合接口请求的方式,完成视频元数据、账号基础信息的抓取,处理了接口签名校验与基础反爬限制;针对购物网站,实现商品价格、销量、规格等信息的批量采集,搭配异步请求提升采集效率,并完成数据去重与结构化清洗;针对投资类数据,对接公开财经接口,实现行情、财报等数据的定时增量抓取,统一存入数据库做持久化存储。过程中自主解决反爬对抗、数据格式统一等问题,积累了爬虫方案设计与数据处理的实战经验。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • ✓ 支付宝企业信用分 优秀 评级
  • ✓ 市场份额约占全行业三分之一
  • ✓ 程序员兼职行业全能首选平台
查看平台资质详情
收藏