ID：242084
ლ蔍鸣ლ 身份已认证
python爬虫工程师
- 公司信息：
- 上海谦码网络科技有限公司
- 工作经验：
- 2年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日远程
- 所在区域：
- 苏州
- 全区
技术能力
掌握pycharm notepad Charles wireshark Xshell Navicat Postman Chrome等工具
掌握 pandas numpy selenium requests json re等爬虫相关模块
掌握scrapy Django 等框架使用
项目经验
电商爬虫：当当 、苏宁、淘宝
其他爬虫:小红书、微信、微博、B站、抖音、百度贴吧、知乎等
使用到的模块 requests、pandas、re、openpyxl、datetime、time等
如果需要提升爬取速度，可以使用ThreadPoolExecutor对爬虫进行改造，改造成多线程爬虫
反爬措施：使用随机请求头、动态cookie、使用代理转发、降低请求速率
案例展示
-
爬虫
对小红书、微信、微博、B站、抖音的相关文章、视频、用户数据、关键词搜索等数据进行抓取、并解析，生成Excel文档并入库，然后生成词云图和分析图（柱状图、折线图等）
-
小红书、微博爬虫
利用pandas读取Excel里面的url，通过split切取自己想要的userID，然后进行拼接，使用线程池把需要请求的URL全部放进去，使用多线程异步发送请求提取爬虫效率，获取返回的JSON数据，然后对JSON数据进行清洗，拿到自己想要的数据
相似人才推荐
-
1100元/天python开发工程师西安揽智俱应智能科技有限公司概要：python/c/c++/mysql 个人有pythonwed后端开发经验/数据分析和挖掘经验
-
500元/天高级python爬虫工程师中启建设有限公司概要：现工作以爬虫为主，主要爬取招聘网站招聘信息，擅长各类爬虫，比如搜狗微信爬虫，selenium模拟登录
-
500元/天Python研发工程师太原理工大学概要：• 掌握Python语言的Django框架，能使用该框架进行Web开发，了解Flask框架 • 熟
-
500元/天python开发工程师西藏国路安科技有限公司概要：5年python和django开发经验，由nginx+uwsgi服务部署和优化经验，可以使用缓存数据
-
500元/天Python工程师中软国际概要：Java编程， Android应用编程， python数据建立，可视化工具， 项目建设管理，数 -
600元/天python开发工程师中软国际概要：1、熟悉 Python 语法及其常用库的使用 2、熟悉numpy、pandas、pillow、xm
-
500元/天python开发工程师广州加研社科技有限公司概要：主要从事python开发工作，曾经工作过的技术方向包括： 1. web开发（django、flas
-
500元/天python,web,小程序.中职称,计算机赛国三大学生,愿薪酬减至1/3,保质量合格概要：bootstrap、js、jq、小程序、php、laravel、MATLAB、java高级编程、安卓
