bilibili爬虫

文化娱乐 视频 案例ID：135112
越过眼睛
2 年经验· 华为
微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。

案例介绍

1.数据采集阶段-b站发现爬虫采集会封IP 使用代理IP 用时大概一周获取1500万数据
2.数据库sqlite3
3.启动run(URL+[i for i in range(1,1997*10000)]) 开启延迟避免封IP，判断code！=0
获取aid(视频编号),view(播放量),danmaku(弹幕数),reply(评论数),favorite(收藏数),coin
(硬币数),share(分享数),保存本地,报错保存logging
4.Pandas+sqlite3+matplotlib 分析数据关系，aid与播放量，收藏与硬币数，查询播放
量前10，查询收藏前10

案例图片

共 2 张
bilibili爬虫 bilibili爬虫
查看该工程师的更多案例 >

相似案例推荐

影视数据分析系统
影视数据分析系统
角色: 后端开发工程师（Node.js） 负责: 负责对项
电影系统+公众号系统
电影系统+公众号系统
基于开源系统的改造 可以实现微信公众公众平台的管理，也可以
移动城市影票
移动城市影票
无线城市手机影票应用程序，是服务于江西全省客户的电影资讯票务
喵看app
喵看app
喵看是一款专注于电影的app，集行业资讯和影迷社交于一身。在
学而思小班课
学而思小班课
学而思小班课APP是为学而思学员提供的专用于体验上课的iPa
某销售系统平台
某销售系统平台
主导开发改项目，完整项目包含管理系统和移动客户端，主要用于直

bilibili爬虫

文化娱乐 · 视频 案例ID：135112
联系该工程师
微信扫码，建群沟通
作者： 越过眼睛 - 2年经验- 华为

案例介绍

1.数据采集阶段-b站发现爬虫采集会封IP 使用代理IP 用时大概一周获取1500万数据
2.数据库sqlite3
3.启动run(URL+[i for i in range(1,1997*10000)]) 开启延迟避免封IP，判断code！=0
获取aid(视频编号),view(播放量),danmaku(弹幕数),reply(评论数),favorite(收藏数),coin
(硬币数),share(分享数),保存本地,报错保存logging
4.Pandas+sqlite3+matplotlib 分析数据关系，aid与播放量，收藏与硬币数，查询播放
量前10，查询收藏前10

案例图片

bilibili爬虫

bilibili爬虫

查看该工程师的更多案例

相似案例推荐

  • 影视数据分析系统

    影视数据分析系统

    角色: 后端开发工程师（Node.js） 负责: 负责对项

  • 电影系统+公众号系统

    电影系统+公众号系统

    基于开源系统的改造 可以实现微信公众公众平台的管理，也可以

  • 移动城市影票

    移动城市影票

    无线城市手机影票应用程序，是服务于江西全省客户的电影资讯票务

  • 喵看app

    喵看app

    喵看是一款专注于电影的app，集行业资讯和影迷社交于一身。在

  • 学而思小班课

    学而思小班课

    学而思小班课APP是为学而思学员提供的专用于体验上课的iPa

  • 某销售系统平台

    某销售系统平台

    主导开发改项目，完整项目包含管理系统和移动客户端，主要用于直

发布任务

企业点击发布任务，工程师会在任务下报名，招聘专员也会在 1 小时内与您联系确认。
点击发布任务

1小时精推人才

需求方专属客服，免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了？客服帮你 1 小时对接沟通 → ×