时间不会说谎℡的案例列表

作者:时间不会说谎℡ · 共 2 个案例

Python爬虫自动化采集知网文献数据

项目是基于 Python + Selenium 的动态网页数据采集工具,专门用于自动化提取学术文献数据。支持在高级检索页面自定义搜索关键词、切换检索字段(如主题、篇名、全文),并能实现自动翻页抓取(且支持一键存入 MySQL 数据库) 我扮演的角色:网页元素定位与交互:利用 WebDriverWait 显式等待解决异步加载难题,通过 CSS 选择器与 XPath 精准定位下拉菜单和输入框。 反爬机制突破:配置浏览器 Options 参数,结合 CDP 协议注入 JS 篡改 navigator.webdriver 属性,并采用 random.uniform 随机延时模拟真人操作,成功绕过

py爬取双色球遗漏数据并入库MySQL

项目是一个基于 Python + Requests + lxml 的数据采集与入库脚本,专门用于自动化抓取彩票网站双色球红球的历史遗漏数据。支持自动解析复杂的 HTML 表格,提取红球号码、出现次数、理论出现次数、出现频率、平均遗漏、最大遗漏等11个核心字段,并在数据清洗后批量存入 MySQL 数据库 我扮演的角色: 网页请求与解析:使用 requests 发送请求,通过 apparent_encoding 自动解决网页中文乱码问题;利用 lxml 的 XPath 精准定位表格节点,并添加 len(tds) >= 11 的逻辑判断,防止空行导致程序崩溃。 数据清洗与转换:编

案例判断参考

程序员兼职平台怎么选 程序员平台对比怎么看 企业找程序员外包避坑

时间不会说谎℡的案例列表

Python爬虫自动化采集知网文献数据

项目是基于 Python + Selenium 的动态网页数据采集工具,专门用于自动化提取学术文献数据。支持在高级检索页面自定义搜索关键词、切换检索字段(如主题、篇名、全文),并能实现自动翻页抓取(且支持一键存入 MySQL 数据库) 我扮演的角色:网页元素定位与交互:利用 WebDriverWait 显式等待解决异步加载难题,通过 CSS 选择器与 XPath 精准定位下拉菜单和输入框。 反爬机制突破:配置浏览器 Options 参数,结合 CDP 协议注入 JS 篡改 navigator.webdriver 属性,并采用 random.uniform 随机延时模拟真人操作,成功绕过...

py爬取双色球遗漏数据并入库MySQL

项目是一个基于 Python + Requests + lxml 的数据采集与入库脚本,专门用于自动化抓取彩票网站双色球红球的历史遗漏数据。支持自动解析复杂的 HTML 表格,提取红球号码、出现次数、理论出现次数、出现频率、平均遗漏、最大遗漏等11个核心字段,并在数据清洗后批量存入 MySQL 数据库 我扮演的角色: 网页请求与解析:使用 requests 发送请求,通过 apparent_encoding 自动解决网页中文乱码问题;利用 lxml 的 XPath 精准定位表格节点,并添加 len(tds) >= 11 的逻辑判断,防止空行导致程序崩溃。 数据清洗与转换:编...

案例判断参考

程序员兼职平台怎么选 程序员平台对比怎么看 企业找程序员外包避坑
查看简历
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×