爬取网易云评论

工具云盘|下载案例ID：225519

偷吃到瓜的猹

1 年经验· 无

微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。

案例介绍

这个脚本是一个用于爬取网易云音乐评论的Python程序，核心功能是通过模拟加密请求，爬取指定歌曲的所有评论并保存到本地文件中。以下是核心内容的整理：功能概述模拟加密请求：通过AES加密和Base64编码，模拟网易云音乐的加密请求。爬取评论：分页爬取指定歌曲的所有评论。保存数据：将爬取到的评论格式化并保存到本地文本文件中。核心逻辑加密参数：使用AES加密和Base64编码对请求参数进行加密。固定的加密密钥和向量（g、i、iv）用于加密过程。请求构造：构造POST请求，包含加密的参数（params 和 encSecKey）。使用固定的请求头和cookies，模拟浏览器行为。分页爬取：通过 cursor 和 offset 参数实现分页爬取。每次请求返回一页评论，提取评论后保存到文件中。评论提取与格式化：提取评论中的用户昵称和评论内容。格式化为“昵称：评论内容”的形式。异常处理：捕获JSON解析错误，防止程序因数据格式问题崩溃。防封IP：每次请求间隔1秒，防止因请求过快被封IP。运行结果爬取完成后，所有评论将被保存到本地文件 comments.txt 中，每条评论占一行，每页评论之间用分隔符分隔。特点模拟加密：通过AES加密和Base64编码，模拟网易云音乐的加密请求，绕过简单的反爬机制。分页爬取：支持分页爬取，能够爬取大量评论。数据格式化：将评论格式化为易读的形式，便于后续处理。