面向企业数据团队的采集管理平台,用于批量采集指定站点的标题、正文与 PDF 附件并统一入库。功能包括采集任务配置与调度、运行状态与进度监控、失败重试、日志查看、数据源管理、文件中心与报表统计。后端使用 Python 实现调度与解析,支持静态页面与 JS 渲染页面的抓取、PDF 文本抽取、去重与字段清洗,采集结果按约定接口推送并同步到对象存储;前端提供任务列表、概览看板与操作审计,支持断点续跑与异常告警。
本项目为一个完整的 Python 数据自动化流水线(ETL)
个人作品:Python 编写的职位需求采集脚本。分页遍历需求
本作品为个人演示项目,使用 Python、Tkinter、P
本作品为个人演示项目,采用 Python、Flask 和 S
具备十余年Linux集成实施与运维经验,持有阿里云ACP、P
拥有多项数据库相关的证书,包含Oracle OCP,MySQ
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者