基于爬虫架构的小说阅读器
独立完成
2020年04月 - 2020年05月
成都
1.利用python爬虫和node爬虫配合实现小说列表页和详情页的抓取和api建立。
2.通过vue前端的相应书籍关键词得到章节信息,再通过书籍关键字得到对应点击章节的内容信息。
3.使用computed计算属性通过多个属性改变页面样式布局。
4.前端使用cdn和gzip处理,路由懒加载等优化处理。
5.上线使用阿里云ecs服务器,rds数据库和oss存储。
基于自适应邻居聚类算法的爬虫系统
独立开发
2021年02月 - 2021年05月
绵阳
1.flask后端完成爬虫对链接页的获取步骤和自适应聚类分析。
2.使用flask设置用户登陆注册,分类页爬取,链接页爬取,内容页爬取等相应接口。
3.存储方案使用mysql,本地文件存储。
4.前端使用vue进行开发,独立开发登陆页,页面配置页,聚类分析页,内容展示页。