和某医院合作训练大模型,训练数据需要采集大量文献期刊(共156个期刊,医院已购买期刊会员),利用爬虫技术完成数据自动化采集与管理。
1. 开发相关脚本实现数据自动化采集,Python3、Selenium、Requests、BeautifulSoup等。
2.文献资料自动保存为PDF文件。
3.输出采集日志,采集记录保存到Mysql数据库。
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者