作品名称:小红书笔记评论采集工具 项目背景:客户需要收集指定小红书笔记下的所有用户评论,用于舆情分析或产品反馈研究。 技术难点: 小红书页面为动态加载,滚动触发新评论出现。 传统requests无法直接获取渲染后的内容,需模拟浏览器。 解决方案: 使用DrissionPage控制浏览器,自动滚动至底部加载全部评论。 通过滚动高度对比判断是否已加载完毕,避免无限滚动。 将获取的数据保存为CSV,便于客户进一步分析。 成果:单次采集可获取500-2000条去重评论,运行稳定,交付代码及使用文档。...
我主导中视频处理系统的后端建设,覆盖视频上传后的转码、抽帧、鉴黄/质检、元数据生成与分发等全链路,日处理数据量达到“2亿+”量级。针对任务量大、链路长、失败重试频繁、热点内容集中等特点,设计统一的任务模型与状态机,采用微服务化拆分与事件驱动架构实现各处理环节解耦;通过队列分片与优先级策略保障关键任务时效性,结合幂等控制、断点续跑、失败自动降级/补偿机制提升成功率;在性能与成本方面,引入批处理与资源池化、热点数据缓存、并发控制与限流策略,并落地可观测体系(核心指标、链路追踪、告警阈值),使平台在高吞吐下保持稳定输出,支撑业务规模持续增长与多场景复用(如推荐、搜索、审核、运营活动等)。...
夜鸦国际服云手机主板机--夜冇子 网盘 主板机云手机都支持 支持免root 云控脚本支持群控 中控数据统计 批量设置导入 分辨率要求720 1280 320 支持主板机 云手机 pc模拟器 vmos 1.全自动主线0-无限级 支持滚角色 2.自动每天副本 3.自动周副本 4.自动野外挂机 5.自定义挂机地图全地图都支持 6.自动强化 7.自动升级技能 8.自动买蓝买红 9.自动签到 10.自动上架 11.自动领邮箱 12.自动提战力 13.自动做装备 14.自动每日金币召唤 15.自动购买金币强化卷 16.自动收藏 17.自动学技能 18.自动...
项目背景: 该项目是服务于4399平台多款网页游戏及手游的运营支撑系统。旨在解决运营部门对游戏数据实时监控、用户行为分析及活动效果评估的需求。系统采用SaaS化架构设计,支持多项目接入,数据量级达到百万级。 我的职责: 作为核心全栈开发工程师,独立负责了“实时数据看板”和“活动配置中心”模块的从0到1开发。 技术栈与实现: 后端: 基于Spring Boot + MyBatis构建微服务,使用Redis缓存热点数据,解决了高并发下的数据查询延迟问题。 前端: 采用Vue.js + ECharts实现复杂的数据可视化,动态展示在线人数、付费率、留存率等关键指标。 成果: 实现了数据...
本项目为辽阳景点宣传静态页面,主要展示辽阳白塔、广佑寺、汤河温泉等特色景点。包含首页轮播图、景点卡片列表、详情弹窗及地图导航跳转。我独立完成全部前端开发:使用HTML5+CSS3实现响应式布局,适配手机与电脑;用JavaScript实现页面交互、图片懒加载及回到顶部功能。页面风格清新,加载流畅,有效提升了景点的线上展示效果。...