焱淼的案例列表

作者:焱淼 · 共 3 个案例

携程景点信息采集

携程景点信息采集项目主要是采集该平台上的景点相关数据。技术上采用 Python 作为开发语言,运用 requests 库发送 HTTP 请求,通过 BeautifulSoup4 解析 HTML 页面 ,还利用正则表达式提取信息。 整体流程包括解析城市 ID,循环请求列表页来获取景点卡片数据,再访问详情页解析以提取更多信息,随后进行数据清洗,比如处理空值、去重等,最后将数据存储为Excel 。可采集的字段丰富,像景点名称、等级、评分、评论数、地址、门票价格等都能获取 。

05福建省公共资源交易平台数据采集

此项目采用 JS 逆向技术,结合 AES 加密算法逆向解析数据,再用 BeautifulSoup 进行数据解析。通过分析网页结构和请求规律,模拟浏览器请求获取数据,能采集到招标公告、中标信息等各类资源交易数据,为相关分析和业务决策提供数据支持 。

房天下房价信息采集

房天下房价信息采集项目,采用 Python 技术,运用 XPath 精准定位房源数据节点,结合 fake_useragent 动态生成请求头以绕过反爬机制。针对房价、户型等字段进行提取后,实施数据清洗,如处理价格噪声、规范地址格式。可实现全国多城市房源信息采集,日均采集量达万条以上,为房产市场分析等提供数据支撑。

案例判断参考

程序员兼职平台怎么选 程序员平台对比怎么看 企业找程序员外包避坑

焱淼的案例列表

携程景点信息采集

携程景点信息采集项目主要是采集该平台上的景点相关数据。技术上采用 Python 作为开发语言,运用 requests 库发送 HTTP 请求,通过 BeautifulSoup4 解析 HTML 页面 ,还利用正则表达式提取信息。 整体流程包括解析城市 ID,循环请求列表页来获取景点卡片数据,再访问详情页解析以提取更多信息,随后进行数据清洗,比如处理空值、去重等,最后将数据存储为Excel 。可采集的字段丰富,像景点名称、等级、评分、评论数、地址、门票价格等都能获取 。...

05福建省公共资源交易平台数据采集

此项目采用 JS 逆向技术,结合 AES 加密算法逆向解析数据,再用 BeautifulSoup 进行数据解析。通过分析网页结构和请求规律,模拟浏览器请求获取数据,能采集到招标公告、中标信息等各类资源交易数据,为相关分析和业务决策提供数据支持 。...

房天下房价信息采集

房天下房价信息采集项目,采用 Python 技术,运用 XPath 精准定位房源数据节点,结合 fake_useragent 动态生成请求头以绕过反爬机制。针对房价、户型等字段进行提取后,实施数据清洗,如处理价格噪声、规范地址格式。可实现全国多城市房源信息采集,日均采集量达万条以上,为房产市场分析等提供数据支撑。...

案例判断参考

程序员兼职平台怎么选 程序员平台对比怎么看 企业找程序员外包避坑
查看简历
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×