小吴在努力

运维开发工程师

安徽兆尹科技技术股份有限公司 · 5年经验

日薪：￥500/8h

地点：合肥全区

时间：下班后周六周日可工作日远程

ID:338687 复制

信用行为

接单数

评价数

收藏数

技术能力

AI 技能提取 | Kubernetes Docker MySQL Redis Oracle PostgreSQL Nginx Tomcat Java Python

数据库：熟练掌握 MySQL、PostgreSQL、Oracle、Redis、polarDB、Kingbase 、达梦等数据库的操作与使用，
并能对其进行简单的调优
中间件：掌握常见的中间件，例如：Tomcat、Nginx、Nacos 、东方通等
容器：熟练掌握 Docker 的使用，熟悉 kubernetes 的操作
编程语言：熟悉 java、python、shell 编程语言

展开全部技术能力

项目经验

这是一个基于 Python 的信息爬取项目，旨在从xxx采购网上获取相关信息。这个项目是为了满足用户对xx采购信息的需求而开发的。
具体而言，我通过分析网站的页面结构和数据来源，设计了合适的爬虫程序。我使用了 Python 中的相关库和框架，如 Requests、BeautifulSoup等，来发送网络请求、解析网页内容，并提取所需的信息。同时，为了确保高效和稳定性，我还添加了一些反爬机制，如设置请求头、使用代理 IP等。
在界面上，采用 PyQt 5界面框架，实现与用户的交互，在程序实现过程中，我考虑到了数据量大、页面变化频繁等问题，采用了多线程（threading ）或异步处理的方式，以提高爬取效率和稳定性。
1、与客户对接需求，收集客户需要爬取的信息
2、对交互界面进行简单的设计，满足客户的需求
3、对爬取的数据进行处理，存储到本地

展开全部项目经验