技术:Python 数据爬取: 使用爬虫技术从互联网上抓取所需的数据,通过网络请求获取网页信息,解析HTML或XML文档,提取所需的数据等。数据处理: 清洗和预处理爬取到的数据,去除重复数据、处理缺失值、转换数据类型、处理异常数据,以便后续的分析等。数据存储: 将清洗和预处理后的数据
项目:1.zf公开信息网站(农产品,植物等),没有反爬 2.某博(内容,评论,热搜榜) 抖某音(评论) B某站(视频,评论,弹幕)A 携某程(景点信息JS逆向,景点评论) 马某蜂窝(旅游目的地,评论,详情页) 7.某宝(商品信息) 8.某东(商品评论) 某点评(美食评论
案例: 贪吃蛇
技术: 熟练掌握 Python 编程语言和面向对象编程思想 熟练掌握 Django, Flask,Fastapi web 开发框架, 了解 Tornado 框架 熟练掌握TCP/IP, HTTP等常用协议,能够通过抓包调试解决实际遇到的问题 熟练掌握 html、cs
项目:项目名称:EA云主机项目 项目描述:为公司外汇用户提供EA云主机和策略购买平台,转化用户。 本人职责: 1. 牵头开发完成EA云主机、EA盾、EA商城和后台的项目立项。 2. 提供数据支持,抓取微信、美团、CCTV等网站数据给其他部门使用。 3. 云主机模块:包含申
案例: EA云主机多空情绪和EA风云榜