全息交通治理与仿真决策平台(北京大学武汉人工智能研究院) 承接全息路口智能管控系统开发,基于Spring Cloud微服务架构,融合多源交通流数据与AI算法,实现路口运行状态实时感知、拥堵智能预警与信号优化调控,提升城市交通治理智能化水平。...
1. 项目背景 为某公司构建企业级数据采集平台,需实时抓取全网财经新闻、行业报告、上市公司公告等信息,支撑其投研分析与资讯产品更新。因数据来源分散(超 200 个目标网站)、反爬机制严格(动态 IP 封锁、验证码频繁触发)。 2. 技术栈 C#、Selenium(动态页面渲染)、Redis(任务队列与缓存)、MySQL+MongoDB(结构化与非结构化数据存储)、Nginx(负载均衡)、Docker(节点容器化部署) 反爬支持:IP 代理池(动态切换)、滑块验证码识别 API、User-Agent 池 3. 核心工作 系统架构设计:通过负载均衡策略将任务按网站类型、数据量...
1,熟练掌握Spring、SpringMVC、MyBatis、Springboot框架的使用 2,熟练使用SpringCloud 微服务架构进行分布式项目开发 3,熟练掌握关系型数据Mysql的使用,非关系数据库Redis的使用,SQL优化 4,熟练使用消息队列RabbitMq的使用,实现微服务之间异步通讯 5,熟悉分布式事务管理工具Seata的使用,保持不通数据库的数据一致性 6,熟悉管理工具Maven,版本控制Git,SVN, idea工具,Debug进行程序调试 7,熟悉Linux系统操作命令,Docker容器的常用操作 8,熟悉http单向文本传输协议,Websocke...