猿急送>

深圳其它兼职程序员

ID：424175

ikun家族

无

公司信息：
无

工作经验：
2年

兼职日薪：
500元/8小时

兼职时间：
下班后

所在区域：
深圳
龙岗

技术能力

熟练掌握 Python 爬虫全栈开发能力，可独立完成静态网页、公开资讯、榜单类公开数据采集需求。基础爬虫开发依托 requests、BeautifulSoup 库，熟练使用 CSS 选择器、XPath 完成网页内容解析，能够精准提取标题、简介、评分、链接、图文等结构化文本数据；熟练使用 Scrapy 异步爬虫框架，掌握项目分层开发，包含 Item 数据定义、Pipeline 数据持久化、全局请求配置、分页自动爬取等工程化开发流程。
具备完整数据处理能力，可将采集数据清洗去重、格式化导出 TXT、CSV、Excel 表格；掌握基础反爬适配方案，可配置请求头 UA、请求延时、随机访问间隔规避封禁，保证爬虫稳定运行。严格遵守网络爬虫合规规范，仅承接政府公开公示、图书榜单、诗词科普、院校公开信息等无隐私、无版权风险的公开静态站点采集任务，能够根据需求定制分页抓取、列表 + 详情二级页面采集脚本，交付可直接运行完整源码与成品数据文件，适配学生论文数据、小型行业公开信息汇总等轻量化项目需求。

项目经验

基于 Scrapy 框架开发图书榜单数据采集程序，目标为公开图书排行榜静态站点，实现自动分页循环爬取。自定义 Item 规范存储书名、作者、评分、简介、出版信息五大字段，通过 Pipeline 将清洗后数据批量导出 Excel；配置全局下载延时、浏览器请求头降低网站访问压力，自动过滤空白无效数据，完成 10 页共 500 + 条图书信息完整采集。项目交付标准化可运行脚本，支持自定义修改爬取页数与目标字段，可直接用于行业数据分析、课程论文数据素材。

案例展示

图书榜单分页爬虫数据采集系统

本作品基于 Scrapy 异步爬虫框架开发，面向公开静态榜单站点实现批量结构化数据采集。独立完成全流程开发，自定义数据存储字段，实现自动分页循环抓取、列表页与详情页联动采集；内置请求头伪装、访问延时策略，降低网站访问压力，避免访问封禁。自带数据清洗逻辑，自动剔除空白、重复无效内容
轻量化网页文本数据采集脚本工具

基于 Python requests+BeautifulSoup 开发轻量化爬虫脚本，无需复杂框架环境，上手门槛低。支持抓取网页标题、正文、作者、链接等文本信息，可实现二级页面联动抓取，自动清洗文本多余换行、空格等冗余字符。适配诗词库、公开资讯、高校公告等静态公开站点，抓取完成后