eemmooo

python程序员
河北泽华伟业科技有限公司 · 1年经验
eemmooo
日薪: ¥500/8h
地点: 北京 海淀
时间: 下班后周六周日可工作日远程
ID:409673 复制

0
接单数
0
评价数
0
收藏数

AI 技能提取 | Django Flask Python 小程序 Linux Selenium
云计算与运维平台: 熟悉 Linux 操作系统及常用命令,掌握 Shell 脚本编写;Linux 系统的安装、配置和维护。
python开发: 懂得Flask和Django框架,能够独立完成网站的制作。
爬虫技术:会使用Selenium模拟浏览器/小程序操作,并使用XPath和BeautifulSoup解析内容,也懂得IP代理与JS逆向。
数据库的配置与使用:熟练编写 SQL 脚本,能够配置主从复制和读写分离。

气象灾情监测采集能力提升项目-全国采集
 系统搭建:使用 python 和 Selenium 编写抓取程序并将其部署到 linux 上实现稳定抓取各网站的链接和文章内容。
 自动化流程:实现模拟浏览器从搜索内容、筛选内容、翻页到文章发布时间、媒体和内容的抓取。
 通用网站配置:实现零代码抓取任意网站的搜索结果,用户只需在配置文件中配置相应 CSS 选择器即可。
 测试与优化:使用多线程优化抓取速度,实现不同网站同时抓取,每分钟入库 100 条链接内容。
 部署:将程序部署在 DMZ 区抓取数据入库,使用主从复制的技术将 DMZ 区的数据入库到内网。
eemmooo ID:409673 复制

eemmooo

python程序员 · 1年经验 · 河北泽华伟业科技有限公司
城市北京 海淀 日薪500元/8h 时间 下班后周六周日可工作日远程
0
累计接单
0
用户评价
0
被收藏

信用行为

0
接单数
0
评价数
0
收藏数

技术能力

AI 技能提取 | Django Flask Python 小程序 Linux Selenium
云计算与运维平台: 熟悉 Linux 操作系统及常用命令,掌握 Shell 脚本编写;Linux 系统的安装、配置和维护。
python开发: 懂得Flask和Django框架,能够独立完成网站的制作。
爬虫技术:会使用Selenium模拟浏览器/小程序操作,并使用XPath和BeautifulSoup解析内容,也懂得IP代理与JS逆向。
数据库的配置与使用:熟练编写 SQL 脚本,能够配置主从复制和读写分离。

项目经验

气象灾情监测采集能力提升项目-全国采集
 系统搭建:使用 python 和 Selenium 编写抓取程序并将其部署到 linux 上实现稳定抓取各网站的链接和文章内容。
 自动化流程:实现模拟浏览器从搜索内容、筛选内容、翻页到文章发布时间、媒体和内容的抓取。
 通用网站配置:实现零代码抓取任意网站的搜索结果,用户只需在配置文件中配置相应 CSS 选择器即可。
 测试与优化:使用多线程优化抓取速度,实现不同网站同时抓取,每分钟入库 100 条链接内容。
 部署:将程序部署在 DMZ 区抓取数据入库,使用主从复制的技术将 DMZ 区的数据入库到内网。
客服二维码

没找到合适的人才?

扫码添加客服极速匹配,或直接发布需求让更多人才主动报名

平台担保交易 · 1小时内不满意可退款

平台信誉与实力

基于 35,336 需求方信任

  • 支付宝企业信用分 优秀 评级
  • 市场份额约占全行业三分之一
  • 程序员兼职行业全能首选平台
查看平台资质详情
收藏