两面

python开发
天融信 · 2年经验
两面
日薪: ¥500/8h
地点: 北京 海淀
时间: 下班后周六周日
ID:315957 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Flask Python
数据分析
精通 python与sql ,熟练掌握 pandas、numpy、request、pyqt5、matplotlib、flask等第三方库,处理各种excel、csv、txt等文件,包括数据标准化,分组聚合计算、筛选、汇总,可开发处理数据的工具与自动化脚本程序。
爬虫经验
有丰富的爬虫经验,爬取多个公开网站的图片、视频、文本信息、招标信息等数据,会js逆向,参数解密、正则。
多维矩阵计算

项目需求:爬取多个公开网站的图片、视频、文本信息、招标信息等数据。
涉及技术:
1.观察网页结构,寻找网站接口,解析接口数据结构,获取指定数据。
2.通过 js 逆向解决参数加密与网站数据加密等问题。
3.通过使用动态代理 IP 和随机 User-Agent 等方法解决反爬问题。
4.通过 Selenium 来模拟浏览器操作以解决动态加载网页的问题。
5.使用多线程解决数据爬取速度问题。
数据处理:
使用正则表达式对爬取的数据进清洗,利用 pandas 将数据进行结构化、去重整理,统一入库或存储为 csv 文件。

开发数据批处理、邮件自动化发送、数据拆分、汇总等脚本文件
两面 ID:315957 复制

两面

python开发 · 2年经验 · 天融信
城市北京 海淀 日薪500元/8h 时间 下班后周六周日
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Flask Python
数据分析
精通 python与sql ,熟练掌握 pandas、numpy、request、pyqt5、matplotlib、flask等第三方库,处理各种excel、csv、txt等文件,包括数据标准化,分组聚合计算、筛选、汇总,可开发处理数据的工具与自动化脚本程序。
爬虫经验
有丰富的爬虫经验,爬取多个公开网站的图片、视频、文本信息、招标信息等数据,会js逆向,参数解密、正则。
多维矩阵计算

项目经验

项目需求:爬取多个公开网站的图片、视频、文本信息、招标信息等数据。
涉及技术:
1.观察网页结构,寻找网站接口,解析接口数据结构,获取指定数据。
2.通过 js 逆向解决参数加密与网站数据加密等问题。
3.通过使用动态代理 IP 和随机 User-Agent 等方法解决反爬问题。
4.通过 Selenium 来模拟浏览器操作以解决动态加载网页的问题。
5.使用多线程解决数据爬取速度问题。
数据处理:
使用正则表达式对爬取的数据进清洗,利用 pandas 将数据进行结构化、去重整理,统一入库或存储为 csv 文件。

开发数据批处理、邮件自动化发送、数据拆分、汇总等脚本文件
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏