独立开发了CSDN技术文章爬虫,使用 Python 的 Requests、BeautifulSoup 等库完成页面抓取与结构化解析;通过随机 User-Agent、请求间隔控制和 IP 代理池轮换来应对反爬策略;抓取数据经过清洗后持久化存储到 MySQL,并编写 Bash 脚本配合 crontab 定时调度,保证数据持续更新。
长期将 Linux(Ubuntu/Debian/CentOS)作为主力开发、部署与运维环境,熟练掌握 grep、awk、sed、find 等命令进行日志分析、文本处理和问题排查;编写大量 Bash 脚本完成环境初始化、系统监控、服务启停与自动化部署等任务;熟悉 systemd 管理服务,iptables/firewalld 防火墙配置,用户权限与磁盘管理,以及 cron 定时任务设置。
对 Python 熟悉程度高,能够运用其编写爬虫、自动化脚本、数据处理及 Web API 原型,熟练使用标准库及常用第三方库(如 Flask、pandas 等)。掌握 Go 语言,理解 goroutine 与 channel 的并发模型,具备开发高性能命令行工具和网络小程序的能力,注重错误处理与工程结构。