技术:* Python语言 * Python网络爬虫技术 * RabbitMQ消息队列 * Celery 任务队列 * 熟练使用redis,mongodb, mysql数据库 * Http协议/Https协议及TCP/ip网络协议 *熟练使用flask *开发微信小程序
项目:1.负责对天猫、京东、微博,微信公众号平台和美团外卖 、美团团购、饿了么,等服务类 平台的数据抓取。 2.从PC端、移动端、app端三个方向寻找数据接口抓取数据。 3.设计分布式数据采集系统和大规模数据采集策略抓取数据。 4.设计爬虫策略和防屏蔽规则,提升网页抓取的效率和
案例: 淘宝全量抓取
技术:Java基础扎实,使用常用设计模式编写可用性、可扩展性、稳定性代码,保证代码质量;通过流式编程加快开发效率。 熟练使用分布式锁、分布式事务,多线程,高并发技术问题处理,有高并发应用开发经验; 熟悉MySQL底层原理、存储引擎、索引、锁、MVCC工作原理,具备⼀定的 SQL 调
项目:沃通知1.0技术栈为SpringMvc,Spring,Mybatis,Kafka,Es,Oracle数据库,jQuery,Jsp,Echarts,Activiti 沃通知2.0技术栈为SpringMvc,SpringBoot,SpringData,Eureka,Getway,A
案例: 云资源运营平台
技术:从事java开发10年,熟悉主流分布式式事务框架,springboot,springcloud,dubbo,数据库 oracle ,mysql 分布式式缓存队列,redis,kafka,racketmq,rocketmq,mybatis,hibernate 有大项目上线经验,工商
项目:工商银行电子银行中台服务 1 在工商银行北京研发部做技术经理,带领16人团队开发,做核心代码开发,代码质量审核,项目组内的任务分配,跟踪,汇报等工作,带领高级和中级工程师完成开发工作,培训中级工程师升级高级工程师, 2 主要负责电子银行服务项目ebb,负责接近100个服务的开
案例: 工商银行电子银行中台服务北京通