本项目是一个多源数据爬虫控制台,支持股票(A股/美股/港股)、新闻、电商、论坛等场景的数据采集与任务管理。后端采用Python + Scrapy框架,前端使用Vue.js构建可视化控制面板,数据存储于SQLite及后续可扩展的MySQL/PostgreSQL。 我负责的核心工作包括: 1. 爬虫引擎设计:实现基于定时任务的自动化爬取,支持增量采集与去重逻辑; 2. 多市场股票行情抓取:针对A股(如000001、600519)、美股(AAPL、TSLA)、港股,分别适配不同的数据源接口,并处理反爬策略(如User-Agent轮换、IP代理); 3. 任务调度模块:开发定时任务组件...
项目定位:服务山西移动主公众号及小程序,覆盖全省11个地市服务号,提供日常/节假日营销活动开发与套餐查询等核心功能。 核心功能模块: 活动营销能力:支持九宫格、秒杀、分享、抢积分、砍价、签到、抽奖等多种活动类型;具备活动配置、奖品管理、白名单/黑名单、渠道触点管理、海报推广等完整营销闭环能力。 公众号运营管理:涵盖菜单管理、图文编辑/推送、消息模板、关键字回复、关注/帮助回复、留言管理、用户标签管理等公众号基础运营能力。 用户与权限体系:包含角色/用户管理、密码管理、黑白名单管理、登录阀值设置、防攻击设置等安全管控能力。 数据采集与分析:支持业务查询/办理、用户浏览、关注、活动参与等...
一、增值宽带业务营销:宽带业务营销、基础带宽调整营销、场景化宽带营销。 二、家庭云电脑业务全生命周期管理:支持云电脑业务的营销活动,完成云电脑业务的订购流程、支持到期自动或手动续订、支持存储、算力等资源的扩容,支持用户主动退订,支持云电脑密码重置功能 三、订购关系与用户行为赋能:统一管理用户与产品的订购关系、记录用户对各类产品的使用行为、查询由用户行为触发的订购记录、查询用户视频观看时长、支持用户预约退订产品、对异常订购进行冲正处理、查询系统下发的短信记录、查询用户主动发送的短信 四、智慧家庭会员体系:提供统一的VIP会员身份、构建会员的基础数据模型、基于用户行为生成精细化会员画像、管理...