山东省两高行业电子监管平台是与省政府合作的项目,平台涉及管理信息大区和互联网大区,管理信息大区提供数据存储、数据计 算和统一权限管理支撑,互联网大区部署对外功能和数据服务提供对外能力输出。本项目采用微服务技术架构,基于微服务提供数 据服务,其建设遵从国网微服务、微应用相关技术规范。系统基于信创云环境搭建,数据库使用海量国产数据库,生产环境采用 k8s技术进行服务网格化管理,并带领团队解决了生产中k8s环境的网络问题,解决框架中重要的优化,以及漏洞升级,后台采用 spring cloud 微服务,生产中自动弹性扩容...
本作品是一个基于 Python 开发的高效壁纸自动化采集工具。针对目标网站图片资源分散、手动下载效率低的问题,我独立设计并实现了整套爬取方案。项目主要运用 Requests 库发起网络请求,配合 lxml 库与 XPath 语法精准定位图片源链接。为应对网站的反爬机制,我在代码中加入了动态 User-Agent 池与 Referer 请求头伪装,确保了爬虫的稳定性。同时,通过编写多线程下载模块,实现了数百张 4K 高清壁纸的批量并发下载与自动分类存储。该工具将原本需要数小时的人工收集工作缩短至几分钟,极大提升了图片素材的获取效率,目前已成功采集并整理壁纸资源数千张。...