Python开发:熟练使用Python进行后端开发(Django/Flask框架)、自动化脚本编写、数据处理与分析(Pandas/NumPy)
爬虫技术:掌握Requests/Scrapy/Selenium框架,熟悉正则表达式、XPath、CSS选择器,能处理JavaScript动态渲染页面、模拟登录、验证码识别(OCR/打码平台)及反爬策略(IP代理池、请求头伪装)
网络渗透:熟悉OWASP Top 10常见漏洞(SQL注入、XSS、CSRF、SSRF等),掌握信息收集、漏洞扫描、漏洞利用基础,能使用Burp Suite、Nmap、Metasploit、SQLmap等工具;了解渗透测试流程与安全加固建议
其他技能:Linux基础命令、MySQL/Redis数据库、Git版本控制、Docker基础
分布式爬虫与数据可视化系统
技术栈:Python + Scrapy + Scrapy-Redis + MongoDB + Flask + ECharts
项目描述:针对某电商平台商品信息进行大规模抓取,实现了分布式爬虫,每日采集数据超过10万条。
核心工作:
设计爬虫架构,使用Scrapy-Redis实现分布式调度,解决单机性能瓶颈。
处理网站反爬机制,包括IP代理池轮换、随机User-Agent、模拟浏览器指纹。
数据清洗后存入MongoDB,并通过Flask搭建简易可视化后台,展示商品价格趋势与销量排行。
📘 个人财务管理系统功能简介 本系统是一款基于 Flask + Bootstrap 构建的轻量级个人财务管理工具,旨在帮助用户清晰记录、分析和规划日常收支。系统界面简洁,操作便捷,适合个人日常使用。 🧩 主要功能模块 1. 用户登录与验证 用户需通过用户名、密码及图形
TERMINALER 是一款基于 DeepSeek 大模型的终端智能对话系统,将 AI 对话与实用工具完美融合于命令行界面。它支持多轮上下文记忆与流式输出,让你实时看到 AI 的思考过程;所有聊天记录自动按时间保存,便于回溯。内置 IP 查询、智能搜题(文字/图片)、短视频解析、