案例介绍
通过Scrapy爬取某影视项目，共爬取二十多个数据字段，数据存储于redis，转存mysql。
name = scrapy.Field() # 标题
other_name = scrapy.Field() # 别名
rank = scrapy.Field() # 评分
director = scrapy.Field() # 导演
stars = scrapy.Field() # 主演
cate = scrapy.Field(
output_processor=MapCompose(cate_handler)
) # 类型
region = scrapy.Field() # 地区
lang = scrapy.Field() # 语言
show_time = scrapy.Field() # 上映时间
film_time = scrapy.Field() # 时长
update_time = scrapy.Field() # 更新时间
recommend = scrapy.Field() # 介绍
url = scrapy.Field() # 链接
play_type1 = scrapy.Field() # 播放方式1
play_type2 = scrapy.Field() # 播放方式2
download_1 = scrapy.Field() # 下载方式1
案例图片
相似案例推荐
其他人才的相似案例推荐
-
dplb论文批量导出
dplb论文批量导出 将dplb上整页的论文批量导出 并尝
-
用户视频下载神器
抖音/快手/微视等平台无水印采集,主要是采集指定用户的所有视
-
用户注册
需要用户登陆，然后微信授权，里面包含有下载多文件，实现文件大
-
用户注册下载管理页面
实现了用户注册和验证，还有人脸识别的部分。用户下载管理页面，
-
华为云空间
华为云空间web端备忘录模块 主要功能是添加、修改、删除备
-
分布式爬虫系统
分布式爬虫系统是基于Gerapy做的分布式多平台爬虫任务管理
-
极简插件
前端采用jQuery+bootstrap / vue 实现
-
贝壳云
智能硬件作为服务器，提供私有云存储服务。 手机文件智能上传
-
雪花云
项目描述：在该平台能够清晰的选择自己所需要的项目进行选择，作
-
软件
概述编辑 联想网盘是针对企业网络文件存储和管理需求的解决方
-
网站开发
一个个人网盘项目，搭建在阿里云上，拥有注册，登录，等功能，支
-
网盘windows客户端
主要负责客户端应用软件功能开发，包括界面，传输等； 数据上
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
